Жесткие диски NVMe: ответ Seagate на растущий спрос на системы хранения данных для ИИ

21 марта 2025, 17:43 / Игры → Новости / Игры

Seagate

Sea Gate, Seagate, (Сигейт): Википедия

совершенствует технологию NVMe для жестких дисков большой емкости, поскольку растущие потребности в хранении в системах и приложениях ИИ

Thumbnail: Искусственный интеллект Иску́сственный интелле́кт (ИИ; англ. artificial intelligence, AI) — свойство искусственных интеллектуальных систем выполнять творческие функции, которые традиционно считаются прерогативой человека (не следует путать с искусственным сознанием); наука и технология создания интеллектуальных машин, особенно интеллектуальных компьютерных программ. Искусственный интеллект связан со сходной задачей использования компьютеров для понимания человеческого интеллекта, но не обязательно ограничивается биологически правдоподобными методами. Существующие на сегодня интеллектуальные системы имеют довольно узкие области применения. Википедия

продолжают расти. Старые и текущие конфигурации хранения с трудом справляются с огромными наборами данных, необходимыми для машинного обучения, которые теперь достигают размеров петабайт и даже эксабайт. Современные варианты хранения имеют много недостатков для задач ИИ. Системы на базе SSD обеспечивают необходимую скорость, однако они нерентабельны для хранения больших данных обучения ИИ. Жесткие диски SAS/SATA дешевле, однако интерфейсы основаны на фирменном кремнии, адаптерах главной шины (HBA) и архитектурах контроллеров, которые с трудом справляются с потребностями в высокой пропускной способности и малой задержке для большого потока данных ИИ.

«Новая идея» Seagate заключается в использовании технологии NVMe в жестких дисках большой емкости. Это создает решение, которое сохраняет жесткие диски экономичными и плотными, одновременно повышая производительность для приложений ИИ. Жестким дискам NVMe не потребуются HBA, мосты протоколов и дополнительная инфраструктура SAS, что обеспечивает бесшовную масштабируемость за счет интеграции хранилища жестких дисков высокой плотности с высокоскоростным кэшированием SSD в унифицированной архитектуре NVMe.

Более того, жесткие диски NVMe предлагают несколько преимуществ. Их легко настроить без специальных контроллеров, и их можно смешивать с SSD, используя один драйвер NVMe и стек ОС. Еще одним преимуществом является поддержка прямой передачи данных из GPU в хранилище с использованием блоков обработки данных (DPU), что позволяет избежать узких мест ЦП. Кроме того, NVMe over Fabrics (NVMe-oF) позволяет интегрировать жесткие диски NVMe в распределенные архитектуры хранения ИИ.

Для тестирования этой технологии Seagate провела проверку концепции (POC), интегрировав жесткие диски NVMe, твердотельные накопители NVMe, процессоры обработки данных NVIDIA BlueField и программное обеспечение AIStore (8 жестких дисков NVMe и 4 твердотельных накопителя NVMe, все напрямую подключенные к процессору обработки данных NVIDIA BlueField 3). Результаты показали меньшую задержку, связанную с хранилищем, упрощенную настройку инфраструктуры, лучшее кэширование и масштабируемость хранилища. Seagate продемонстрировала, что жесткие диски NVMe не просто работают лучше. Они также намного экологичнее. Они используют в десять раз меньше воплощенного углерода на терабайт и в четыре раза меньше энергии, чем твердотельные накопители. Кроме того, они стоят намного меньше за терабайт.

По сравнению с твердотельными накопителями жесткие диски NVMe обеспечивают:

В 10 раз более эффективное использование углерода на терабайт, что значительно снижает воздействие на окружающую среду.
В 4 раза более эффективное энергопотребление на терабайт, что снижает затраты на электроэнергию в центрах обработки данных ИИ.
Значительно более низкая стоимость за терабайт, что снижает совокупную стоимость владения хранилищем ИИ при масштабировании.

У Seagate большие планы, поскольку они хотят, чтобы их платформа Mozaic поддерживала больше, чем текущие диски на 36 ТБ. Они планируют улучшить поддержку NVMe over Fabrics (NVMe-oF) и в настоящее время работают со своими клиентами и партнерами, чтобы изучить, как жесткие диски NVMe могут вписаться в решения для хранения данных ИИ следующего поколения. Seagate признает, что жесткие диски не могут конкурировать с твердотельными накопителями, когда дело касается чистой скорости. Однако их модернизированные жесткие диски NVMe могут обеспечить более эффективный вариант хранения для центров обработки данных следующего поколения.

Источник: ITHome