Компания Stability AI, известная своей моделью Stable Diffusion, выпустила новое семейство аудиомоделей под названием Stability Audio 3.0. По заявлению компании, флагманская модель способна генерировать профессиональную музыку продолжительностью более шести минут.

В рамках линейки Stability Audio 3.0 представлены четыре модели: small SFX (459 млн параметров), small (459 млн параметров), medium (1,4 млрд параметров) и large (2,7 млрд параметров). Пара компактных моделей подходит для генерации звуков и музыки на устройстве длительностью до двух минут.

Модели medium и large могут создавать полноценные композиции продолжительностью 6 минут 20 секунд, сохраняя музыкальную структуру и мелодический тон. Это более чем вдвое превышает возможности Stable Audio 2.0, выпущенной в 2024 году.

Stability AI делает модели small SFX, small и medium доступными с открытыми весами для всех желающих. В 2024 году компания выпустила Stable Audio Open, которая позволяла генерировать музыку длительностью до 47 секунд. Новое семейство моделей представляет собой значительный шаг вперед по сравнению с предыдущими открытыми версиями.

Image Credits: Stability AI
Image Credits:Stability AI

Модель large доступна только через API и платные сервисы самостоятельного хостинга. Кроме того, компаниям с доходом более 1 млн долларов (~80 млн рублей) потребуется приобрести корпоративную лицензию.

Многие компании, включая Google и ElevenLabs, выпускают модели и инструменты для генерации музыки. Однако, как показывают текущие судебные разбирательства Suno и Udio, лицензирование данных и партнерство с музыкальными лейблами могут стать ключевым фактором долгосрочного выживания этих сервисов.

В прошлом году Stability AI заключила соглашения с Warner Music Group и Universal Music Group для разработки моделей и инструментов для создания музыки. Компания заявила, что ее новейший набор аудиомоделей построен на полностью лицензированных данных.

Стартап в сфере ИИ разрабатывает новую линейку продуктов для профессиональных музыкантов, но не раскрыл подробностей о их функциях. Итан Каплан, бывший директор по цифровым технологиям Universal Audio и Fender, присоединяется к компании, чтобы возглавить профессиональное музыкальное направление Stability.

Ряд ИИ-компаний пытаются укрепить свою репутацию, нанимая музыкальных руководителей. Ранее в этом году Suno наняла бывшего генерального директора Merlin Джереми Сироту на должность коммерческого директора. ElevenLabs также наняла Дерека Курнойера из независимого музыкального издателя Kobalt на должность руководителя стратегии музыкального бизнеса.