AMD и Stability AI представили локальное ИИ-генерацию изображений на ноутбуках с NPU

Компании AMD и Stability AI объявили о совместной работе по адаптации Stable Diffusion 3.0 Medium для платформы Stability Amuse AI. Это позволит улучшить генерацию изображений и обработку текста с использованием нейропроцессоров (NPU). Ранее на Computex 2024 AMD демонстрировала первую в мире модель SDXL Turbo с поддержкой block FP16, разработанную совместно со Stability AI. Новая модель достигла точности FP16 при производительности уровня INT8.

Теперь компании представляют следующую ступень сотрудничества — первую модель SD 3.0 Medium с block FP16. Это решение обеспечивает более высокое качество изображений и оптимизировано для NPU AMD Ryzen AI XDNA 2. Пользователи могут опробовать новинку прямо сейчас через Amuse 3.1 от Tensorstack в режиме HQ на поддерживаемых ноутбуках с Ryzen AI.

Новая модель block FP16 SD 3 Medium требует меньше памяти по сравнению с предыдущими версиями — она работает на ноутбуках с 24 ГБ ОЗУ, используя всего 9 ГБ памяти. Этот формат данных позволяет генерировать изображения высокого качества локально на ноутбуках с менее чем 32 ГБ памяти без чрезмерного квантования. Система использует двухэтапный конвейер на базе NPU AMD XDNA 2, который повышает разрешение стандартных 2-мегапиксельных изображений (1024×1024) до 4 мегапикселей (2048×2048).

Ранее Amuse предлагал Stable Diffusion Medium, но для работы требовался GPU, что ограничивало распространение технологии. Теперь пользователи могут выбирать между обработкой на GPU или NPU. Для тестирования новой функции необходимо скачать последнюю версию драйвера Adrenalin, установить Amuse 3.1 Beta и в режиме EZ Mode перевести ползунок в положение HQ, активировав XDNA 2 Stable Diffusion Offload.

Источник: AMD Blog