Stability AI представила Stability Audio 3.0 с возможностью создания шестиминутных песен

Компания Stability AI, известная своей моделью Stable Diffusion, выпустила новое семейство аудиомоделей под названием Stability Audio 3.0. По заявлению компании, флагманская модель способна генерировать профессиональную музыку продолжительностью более шести минут.

В рамках линейки Stability Audio 3.0 представлены четыре модели: small SFX (459 млн параметров), small (459 млн параметров), medium (1,4 млрд параметров) и large (2,7 млрд параметров). Пара компактных моделей подходит для генерации звуков и музыки на устройстве длительностью до двух минут.

Модели medium и large могут создавать полноценные композиции продолжительностью 6 минут 20 секунд, сохраняя музыкальную структуру и мелодический тон. Это более чем вдвое превышает возможности Stable Audio 2.0, выпущенной в 2024 году.

Stability AI делает модели small SFX, small и medium доступными с открытыми весами для всех желающих. В 2024 году компания выпустила Stable Audio Open, которая позволяла генерировать музыку длительностью до 47 секунд. Новое семейство моделей представляет собой значительный шаг вперед по сравнению с предыдущими открытыми версиями.

Image Credits: Stability AI
Image Credits:Stability AI

Модель large доступна только через API и платные сервисы самостоятельного хостинга. Кроме того, компаниям с доходом более 1 млн долларов (~80 млн рублей) потребуется приобрести корпоративную лицензию.

Многие компании, включая Google и ElevenLabs, выпускают модели и инструменты для генерации музыки. Однако, как показывают текущие судебные разбирательства Suno и Udio, лицензирование данных и партнерство с музыкальными лейблами могут стать ключевым фактором долгосрочного выживания этих сервисов.

В прошлом году Stability AI заключила соглашения с Warner Music Group и Universal Music Group для разработки моделей и инструментов для создания музыки. Компания заявила, что ее новейший набор аудиомоделей построен на полностью лицензированных данных.

Стартап в сфере ИИ разрабатывает новую линейку продуктов для профессиональных музыкантов, но не раскрыл подробностей о их функциях. Итан Каплан, бывший директор по цифровым технологиям Universal Audio и Fender, присоединяется к компании, чтобы возглавить профессиональное музыкальное направление Stability.

Ряд ИИ-компаний пытаются укрепить свою репутацию, нанимая музыкальных руководителей. Ранее в этом году Suno наняла бывшего генерального директора Merlin Джереми Сироту на должность коммерческого директора. ElevenLabs также наняла Дерека Курнойера из независимого музыкального издателя Kobalt на должность руководителя стратегии музыкального бизнеса.