Seagate совершенствует технологию NVMe для жестких дисков большой емкости, поскольку растущие потребности в хранении в системах и приложениях ИИ продолжают расти. Старые и текущие конфигурации хранения с трудом справляются с огромными наборами данных, необходимыми для машинного обучения, которые теперь достигают размеров петабайт и даже эксабайт. Современные варианты хранения имеют много недостатков для задач ИИ. Системы на базе SSD обеспечивают необходимую скорость, однако они нерентабельны для хранения больших данных обучения ИИ. Жесткие диски SAS/SATA дешевле, однако интерфейсы основаны на фирменном кремнии, адаптерах главной шины (HBA) и архитектурах контроллеров, которые с трудом справляются с потребностями в высокой пропускной способности и малой задержке для большого потока данных ИИ.

«Новая идея» Seagate заключается в использовании технологии NVMe в жестких дисках большой емкости. Это создает решение, которое сохраняет жесткие диски экономичными и плотными, одновременно повышая производительность для приложений ИИ. Жестким дискам NVMe не потребуются HBA, мосты протоколов и дополнительная инфраструктура SAS, что обеспечивает бесшовную масштабируемость за счет интеграции хранилища жестких дисков высокой плотности с высокоскоростным кэшированием SSD в унифицированной архитектуре NVMe.

Более того, жесткие диски NVMe предлагают несколько преимуществ. Их легко настроить без специальных контроллеров, и их можно смешивать с SSD, используя один драйвер NVMe и стек ОС. Еще одним преимуществом является поддержка прямой передачи данных из GPU в хранилище с использованием блоков обработки данных (DPU), что позволяет избежать узких мест ЦП. Кроме того, NVMe over Fabrics (NVMe-oF) позволяет интегрировать жесткие диски NVMe в распределенные архитектуры хранения ИИ.

Для тестирования этой технологии Seagate провела проверку концепции (POC), интегрировав жесткие диски NVMe, твердотельные накопители NVMe, процессоры обработки данных NVIDIA BlueField и программное обеспечение AIStore (8 жестких дисков NVMe и 4 твердотельных накопителя NVMe, все напрямую подключенные к процессору обработки данных NVIDIA BlueField 3). Результаты показали меньшую задержку, связанную с хранилищем, упрощенную настройку инфраструктуры, лучшее кэширование и масштабируемость хранилища. Seagate продемонстрировала, что жесткие диски NVMe не просто работают лучше. Они также намного экологичнее. Они используют в десять раз меньше воплощенного углерода на терабайт и в четыре раза меньше энергии, чем твердотельные накопители. Кроме того, они стоят намного меньше за терабайт.

По сравнению с твердотельными накопителями жесткие диски NVMe обеспечивают:

  • В 10 раз более эффективное использование углерода на терабайт, что значительно снижает воздействие на окружающую среду.
  • В 4 раза более эффективное энергопотребление на терабайт, что снижает затраты на электроэнергию в центрах обработки данных ИИ.
  • Значительно более низкая стоимость за терабайт, что снижает совокупную стоимость владения хранилищем ИИ при масштабировании.

У Seagate большие планы, поскольку они хотят, чтобы их платформа Mozaic поддерживала больше, чем текущие диски на 36 ТБ. Они планируют улучшить поддержку NVMe over Fabrics (NVMe-oF) и в настоящее время работают со своими клиентами и партнерами, чтобы изучить, как жесткие диски NVMe могут вписаться в решения для хранения данных ИИ следующего поколения. Seagate признает, что жесткие диски не могут конкурировать с твердотельными накопителями, когда дело касается чистой скорости. Однако их модернизированные жесткие диски NVMe могут обеспечить более эффективный вариант хранения для центров обработки данных следующего поколения.

Источник: ITHome