ROCm от AMD или CUDA от NVIDIA для ИИ?

/ ТехнологииНовости / Технологии
Борьба за ускорение ИИ

Thumbnail: Искусственный интеллектИску́сственный интелле́кт (ИИ; англ. artificial intelligence, AI) — свойство искусственных интеллектуальных систем выполнять творческие функции, которые традиционно считаются прерогативой человека (не следует путать с искусственным сознанием); наука и технология создания интеллектуальных машин, особенно интеллектуальных компьютерных программ. Искусственный интеллект связан со сходной задачей использования компьютеров для понимания человеческого интеллекта, но не обязательно ограничивается биологически правдоподобными методами. Существующие на сегодня интеллектуальные системы имеют довольно узкие области применения. Википедия

Читайте также:Правительство США намерено запретить посредническую компанию Huawei Sophgo из-за поставок чипов ИИ — партнерство обошло санкции США в отношении чиповРазработчики Catly настаивают, что в трейлере не использовался генеративный ИИSSD-накопитель PS1012 U.2 для дата-центров ИИMarvell анонсирует специализированную вычислительную архитектуру HBM для ускорителей ИИMarvell анонсирует новую архитектуру HBM для ИИ-ускорителей

в центрах обработки данных, как известно большинству читателей, является безумно конкурентной, поскольку NVIDIA предлагает пакет программного обеспечения высшего уровня. Однако в последние годы AMD

Advanced Micro Devices, Inc. (AMD, дословный перевод с англ. — «передовые микроустройства») — производитель интегральной микросхемной электроники. Второй по объему производства и продаж производитель процессоров архитектуры x86 c долей рынка 16,9 %▲(2014), а также один из крупнейших производителей графических процессоров (после приобретения ATI Technologies в 2006 году), чипсетов для материнских плат и флеш-памяти. Компания с 2009 года не имеет собственного производства и размещает заказы на мощностях других компаний. Википедия

Читайте также:Radeon RX 8000 — для мобильных, RX 9000 — для ПКПредполагается, что графические процессоры AMD RDNA 4 получат ребрендинг RX 9000AMD Radeon «RX 8800 XT» на самом деле RX 9070 XT?Утечка эталонного дизайна AMD Radeon RX 8800 XT?Советы по тестированию AMD Ryzen AI 7 350 на графическом процессоре Radeon 860M

пыталась получить часть доходов, которые готовы тратить гиперскалибровщики и OEM-производители, за счет линейки ускорителей Instinct MI300X для искусственного интеллекта и высокопроизводительных компьютеров. Несмотря на наличие достойного аппаратного обеспечения, компания далека от того, чтобы сократить разрыв в программном обеспечении со своим конкурентом NVIDIA. Согласно последнему отчету исследовательской и консалтинговой фирмы SemiAnalysis, они провели пятимесячный эксперимент с использованием Instinct MI300X для тренировок и тестовых прогонов. И результаты оказались неожиданными: даже при более совершенном аппаратном обеспечении программный пакет AMD, включая ROCm, значительно снизил производительность AMD.
"Сравнивая графические процессоры

Thumbnail: Графический процессорГрафический процессор (англ. graphics processing unit, GPU) — отдельное устройство персонального компьютера или игровой приставки, выполняющее графический рендеринг; в начале 2000-х годов графические процессоры стали массово применяться и в других устройствах: планшетные компьютеры, встраиваемые системы, цифровые телевизоры. Современные графические процессоры очень эффективно обрабатывают и отображают компьютерную графику, благодаря специализированной конвейерной архитектуре они намного эффективнее в обработке графической информации, чем типичный центральный процессор. Графический процессор в современных видеокартах (видеоадаптерах) применяется в качестве ускорителя трёхмерной графики. Википедия

NVIDIA с MI300X от AMD, мы обнаружили, что потенциальное преимущество MI300X на бумаге не было реализовано из-за отсутствия программного обеспечения AMD для публичного выпуска и отсутствия тестирования со стороны AMD", - отметили в SemiAnalysis, далее приводя аргументы в отчете, добавив, что "преимущества AMD в том, что MI300X опыт работы с программным обеспечением изобилует ошибками, поэтому обучение работе с AMD «из коробки» невозможно. Мы надеялись, что AMD сможет составить серьезную конкуренцию NVIDIA в области обучения рабочих нагрузок, но, к сожалению, на сегодняшний день это не так. AMD еще предстоит преодолеть барьер, связанный с использованием CUDA, из-за более слабой, чем ожидалось, культуры обеспечения качества программного обеспечения (QA) и сложного опыта использования готовых решений".

У NVIDIA есть огромное преимущество в том, что программное обеспечение полностью функционально. "Так же быстро, как AMD пытается заполнить пробел в CUDA, инженеры NVIDIA работают сверхурочно, чтобы углубить этот пробел новыми функциями, библиотеками и обновлениями производительности", - отмечается в отчете SemiAnalysis. Разработчик Tinybox и Tinybox Pro Tinygrad также неоднократно подтверждал это в своем профиле X, у которого в прошлом также были серьезные проблемы с программным обеспечением AMD.

Если взглянуть на чипы AMD Instinct MI300X и NVIDIA H100/H200 2023 года выпуска, то MI300X становится явным победителем с точки зрения производительности. Он достигает 1307 ТФЛОП/с при вычислениях по протоколу FP16, превосходя процессор NVIDIA H100, который выдает 989 ТФЛОП/с. MI300X оснащен 192 ГБ оперативной памяти формата HBM3 и пропускной способностью 5,3 ТБ/с. Эти характеристики подходят даже для модели NVIDIA H200, которая имеет 141 ГБ оперативной памяти HBM3e и пропускную способность 4,8 ТБ/с. Чип AMD также отличается более низкой общей стоимостью владения, благодаря чему одна только сеть обходится на 40% дешевле. На бумаге чип AMD выглядит превосходящим решения NVIDIA Hopper, но на самом деле это не так уж и много.

Внутренние команды AMD имеют ограниченный доступ к графическим процессорам для разработки и усовершенствования программного стека ROCm. Компания Tensorwave, которая является одним из крупнейших поставщиков графических процессоров AMD в облаке, взяла свои собственные графические процессоры и предоставила инженерам AMD аппаратное обеспечение по запросу бесплатно, просто чтобы можно было исправить программное обеспечение. И это при том, что Tensorwave заплатила за графические процессоры AMD, бесплатно передав свои собственные в аренду AMD. Наконец, SemiAnalysis отметила, что программный стек AMD был улучшен на основе их предложений. Тем не менее, компании предстоит пройти долгий путь, прежде чем она достигнет уровня стабильности и производительности NVIDIA CUDA. Подробный анализ представлен в отчете SemiAnalysis report здесь.

Источник: SemiAnalysis

Подписаться на обновления Новости / Технологии

0 комментариев

Оставить комментарий


Новые комментарии

Поддерживаю. А еще если брать в разрезе Илон Маск и безопасность данных, то вообще смешно. Особенно для жителей РФ)О конфиденциальности можно забыть
  • Анон
1c пох на ваши операции, количество ядер и прочее. Умудрились написать ядро четко привязанное к Мгц. Единственный в мире продукт для 1го ядра.
  • Анон
Указан неверный диаметр вентиляторов, не 80 мм, а 100 мм. И чип не 103, а 102.
  • Анон
С прошлым обновлением как раз и появилась эта ошибка. А новое как и написано не дают скачать.
  • Анон
При включении 3D Turbo Mode у вас максимум будет доступно 8 ядер и 8 потоков всего. т.е. если у вас 16 ядерный на 32 потока то будет всего 8 ядер и 8 потоков! Странная оптимизация!
  • Анон
После скачивания вышел синий экран СУПЕР!
  • Анон
требуется указать магазин и purchase date без этого не регистрирует
  • Анон
Россия на них клала❤❤❤❤, будет называться Ладушка 2.0 )))
  • Анон
ДА у меня тоже неработает уже все Вы не знаете каким способом вернуть все обратно СПАСИ
  • Анон
Хаетв Рустам Базарвич Хаетв
  • Анон

Смотреть все