Seagate и Nvidia показали NVMe-диски
Иску́сственный интелле́кт (ИИ; англ. artificial intelligence, AI) — свойство искусственных интеллектуальных систем выполнять творческие функции, которые традиционно считаются прерогативой человека (не следует путать с искусственным сознанием); наука и технология создания интеллектуальных машин, особенно интеллектуальных компьютерных программ.
Искусственный интеллект связан со сходной задачей использования компьютеров для понимания человеческого интеллекта, но не обязательно ограничивается биологически правдоподобными методами.
Существующие на сегодня интеллектуальные системы имеют довольно узкие области применения. Википедия
Читайте также:Ноутбуки MSI GeForce RTX 50 готовы к высокопроизводительным играм и локальным приложениям ИИAMD заявляет, что ее процессор Ryzen AI Max+ 395 в 12,2 раза быстрее Lunar Lake в задачах ИИGemini 2.0 Flash от Google удаляет водяные знаки и создаёт фото знаменитостейСаммит Beyond CUDA: борьба с доминированием NvidiaС сентября в Китае будет введена четкая маркировка всего контента, созданного с помощью ИИ
Sea Gate, Seagate, (Сигейт): Википедия
Читайте также:Seagate выпускает накопитель Genshin Impact Limited EditionМошенничество с показателями надёжности SeagateСкандал с жёсткими дисками Seagate. Пострадали IronWolf ProSeagate объявляет о соглашении о приобретении IntevacSeagate анонсирует свою серию сверхкомпактных твердотельных накопителей
PCI Express (Peripheral Component Interconnect Express), или PCIe, или PCI-e (также известная как 3GIO for 3rd Generation I/O; не путать с PCI-X и PXI) — компьютерная шина (хотя на физическом уровне шиной не является, будучи соединением типа «точка-точка»), использующая программную модель шины PCI и высокопроизводительный физический протокол, основанный на последовательной передаче данных.
Разработка стандарта PCI Express была начата фирмой Intel после отказа от шины InfiniBand. Официально первая базовая спецификация PCI Express появилась в июле 2002 года.
Развитием стандарта PCI Express занимается организация PCI Special Interest Group. Википедия
Читайте также:Viper EV330: новый корпус от Patriot MemoryASUS улучшит механизм PCIe Q-ReleaseSilicon Motion выпустила набор разработок PCIe Gen5 Enterprise SSDGIGABYTE тестирует PCIe Scratch. Подтверждён дизайн ASUS Q-Release?Kingston представляет твердотельный накопитель DC3000ME PCIe 5.0 NVMe U.2 Enterprise SSD с eTLC NAND
NVIDIA Corporation (NASDAQ: NVDA) — американская компания, один из крупнейших разработчиков графических ускорителей и процессоров, а также наборов системной логики. На рынке продукция компании известна под такими торговыми марками как GeForce, nForce, Quadro, Tesla, ION и Tegra. Компания была основана в 1993 году. По состоянию на август 2006 года в корпорации насчитывалось более 8 тысяч сотрудников, работающих в 40 офисах по всему миру. Википедия
Читайте также:Дженсен Хуанг представил Blackwell 300 AI на Nvidia GTC 2025Создатели мода Half-Life 2 RTX поделились информацией о системных требованиях демоверсииASUS представляет новый мини-ПК Ascent GX10 на базе суперчипа NVIDIA GB10 Grace BlackwellEurocom представляет новый 18-дюймовый ноутбук Raptor X18 с NVIDIA GeForce RTX 5090CoolIT показала технологию жидкостного охлаждения с ИИ на NVIDIA GTC 2025
Новый протокол, новая производительность
Жесткие диски традиционно использовали специализированные интерфейсы, такие как SCSI, Parallel ATA, Serial ATA (SATA) и SATA, которые хороши, но достигают своих пределов для современных высокопроизводительных сред данных, особенно в ИИ и крупных центрах обработки данных. И SATA, и SAS полагаются на сериализованные протоколы, разработанные в 1980-х годах, которые несут устаревшие уровни протоколов, не подходящие для современной высокоскоростной обработки данных. Кроме того, настройки SAS и SATA требуют адаптеров шины хоста и дополнительных уровней контроллера, что добавляет сложности, потенциальных точек отказа и задержек. В результате эти архитектуры не подходят для рабочих нагрузок ИИ, которые требуют высокопроизводительного доступа с низкой задержкой к большим наборам данных.
По сравнению с SAS/SATA, NVMe в паре с PCIe обеспечивает значительно более высокую пропускную способность, меньшую задержку и лучшую масштабируемость. В отличие от SAS/SATA, которые ограничены скоростью 6-12 Гбит/с и полагаются на сложные слои, такие как HBA и экспандеры, NVMe работает через стандартный интерфейс PCIe, поддерживая скорость до 128 ГБ/с (одному жесткому диску еще долго не понадобится больше 1 ТБ/с, но на системном уровне, чем больше пропускная способность, тем лучше), и значительно снижает сложность системы, а также упрощает масштабируемость. NVMe также обеспечивает прямой доступ GPU к хранилищу (GPUDirect) через DPU, минуя CPU (тем самым уменьшая узкие места CPU), и поддерживает очереди 64K с 64K команд на очередь, значительно улучшая параллельную обработку, что важно для систем ИИ.
Система проверки концепции
Для проверки этой архитектуры компания Seagate создала экспериментальную систему, объединяющую восемь жестких дисков NVMe, четыре твердотельных накопителя NVMe для кэширования, процессор обработки данных Nvidia Bluefield 3 и программное обеспечение AIStore, работающие в гибридном массиве Seagate NVMe.
Тестовая машина продемонстрировала, что прямой доступ GPU к хранилищу минимизирует задержку в рабочих процессах ИИ. Кроме того, удаление устаревшей инфраструктуры SAS/SATA упростило архитектуру системы и повысило эффективность хранения. Программное обеспечение AIStore динамически оптимизирует кэширование и распределение данных по уровням, что значительно повышает производительность обучения модели ИИ.
Изображение: Seagate
Кроме того, Seagate утверждает, что система может масштабироваться до эксабайтных уровней при использовании NVMe-over-Fabric (NVMe-oF). В частности, интеграция NVMe-oF обеспечивает бесшовное расширение кластеров хранения AI с несколькими стойками, что имеет решающее значение для эффективного масштабирования (возможно, что еще важнее, бесшовного) в крупных центрах обработки данных.
Испытание подтвердило, что жесткие диски NVMe могут поддерживать высокопроизводительные среды искусственного интеллекта без необходимости использования решений для хранения данных, полностью основанных на флэш-памяти, что позволяет снизить затраты и сохранить производительность.
Системы ИИ стимулируют экспоненциальный рост потребностей в хранении данных, при этом существующие архитектуры сталкиваются со значительными ограничениями. Твердотельные накопители обеспечивают высокую производительность, но финансово несостоятельны для долгосрочного хранения в таких масштабах. Жесткие диски SAS и SATA предлагают доступную стоимость, но вносят сложность и задержку из-за зависимости от адаптеров главной шины (HBA), фирменных кремниевых чипов и систем контроллеров, не оптимизированных для требований ИИ к высокой пропускной способности и низкой задержке. Варианты облачного хранения еще больше усложняют инфраструктуру из-за высоких затрат на передачу данных по WAN, непредсказуемого времени извлечения и скачков задержек, что снижает эффективность обработки ИИ. Эти ограничения приводят к сложным, дорогостоящим и неэффективным архитектурам, замедляя внедрение и производительность ИИ.
Будущие потребности в хранении данных для ИИ
В настоящее время предприятия управляют наборами данных в масштабе от петабайта до эксабайта для обучения и вывода моделей ИИ. В дальнейшем их потребности будут расти, и именно здесь решение Seagate по обеспечению подключения NVMe к жестким дискам и созданию единой и эффективной платформы хранения данных в центре обработки данных проявит себя.
Изображение: Seagate
С точки зрения сложности HDD добавление NVMe к жестким дискам не так уж и дорого, поскольку HDD сохраняют физические разъемы SAS/SATA и свой традиционный 3,5-дюймовый форм-фактор. Единственное, что меняется, — это добавление поддержки протокола NVMe и интерфейса PCIe к контроллеру (который, вероятно, стоит копейки), а также разработка прошивки, поддерживающей функции и возможности NVMe, такие как GPUDirect. Учитывая, что переход на подключение NVMe/PCIe устраняет HBA и сложность, небольшие повышения себестоимости HDD вряд ли будут замечены отраслью.
Однако по мере увеличения емкости жестких дисков их производительность IOPS-на-ТБ падает, и это может повлиять на производительность при работе в кластерах ИИ в будущем (или потребует больше флэш-памяти для смягчения). В связи с этим, возможно, что в будущем двухприводные жесткие диски, такие как Mach.2 от Seagate, будут предпочтительны для кластеров ИИ. Такие диски, конечно, дороже обычных одноприводных жестких дисков, но каждый такой диск все равно стоит меньше двух одноприводных жестких дисков, поэтому это не приведет к каким-либо существенным сбоям.
Когда?
Один из вопросов, который задаст себе внимательный читатель, узнав о преимуществах NVMe для жестких дисков, — когда такие жесткие диски выйдут на рынок. К сожалению, сказать сложно. Крупные компании предпочитают иметь два источника поставок для таких продуктов, как жесткие диски, поэтому жесткие диски NVMe были разработаны в рамках проекта OCP. Однако, хотя у Seagate уже есть жесткие диски NVMe, ее конкурентам еще предстоит представить свои устройства. Когда это произойдет, и все производители жестких дисков смогут производить такие продукты в больших объемах, поставщики облачных услуг, которые работают с компаниями и рабочими нагрузками ИИ, начнут внедрять такие продукты.
Источник: Tomshardware.com
0 комментариев