Stability AI представила открытую модель Stable Audio Open для генерации музыки и звуковых эффектов

Stability выложили в открытый доступ модель Stable Audio Open - довольно простая модель, которая может генерировать по текстовому описанию звуки и немного музыки. Вцелом коммерческие сервисы ушли от Audio Open уже очень далеко, приятно что появился опенсорсный заход на тему. Особенно учитывая что, цитирую "Новая модель была обучена на аудиоданных из FreeSound и Free Music Archive. Это позволило нам создать открытую аудиомодель, соблюдая при этом права авторов." Стоит заметить, что лицензия Stable Audio Open очень далека от определения Open Source. Для того чтобы получить доступ к весам, надо сначала подписать онлайн форму с согласием с лицензией, а потом выяснится, что для использования весов в любых коммерческих целях предусмотрена оплата подписки.

Stability AI запустили опенсорс модель для генерации песен. Stable Audio Open может создавать короткие сэмплы до 47 секунд и накладывать звуковые эффекты. Плюс открытого исходного кода в том, что пользователи могут настроить собственные аудиоданные. Например, барабанщик запишет, как он играет, а затем на основе звука ударных нейронка напишет сэмпл. Пробуем тут.

Выяснилось что слитые веса были от Stable Audio Open 1.0 Stability релизнули открытую версию Stable Audio. Модель с архитектурой от Stable Audio 2, натренированная на открытых данных FreeSound и Free Music Archive . По заявлениям Stability она подходит для генерации звуковых эффектов, но с музыкой там не очень что и показал мой опыт её использования . Блогпост Веса

TechCrunch: Stability AI представил открытую модель для генерации аудио – Генеративная модель получила название Stable Audio Open – Она принимает текстово описание и выдает аудио до 47 сек. – Новая модель была обучена только на бесплатных записях – Это около 486 тыс. треков из FreeSound и Free Music Archive – Модель может создавать аудио для видео, фильмов и др. – Она способна редактировать существующие аудиозаписи – Ее можно настроить на основе собственных аудиоданных – Например, барабанщик может использовать свои семплы – Полноценные песни Stable Audio Open создавать не может – Для такого потребуется уже премиум-сервис Stable Audio – Stable Audio Open нельзя применять для коммерческих целей

Stability AI выпустили Stable Audio Open — ИИ создания саунд-эффектов или полноценной музыки. Все функции доступны бесплатно, а создавать можно трек до 3 минут, который позже можно скачать. Пробуем тут.

Stability AI опубликовала открытую модель Stable Audio для генерации музыки, звуковых эффектов и окружения. Stable Audio Open генерирует 47-секундные музыкальные семплы и звуковые эффекты. К примеру, можно попросить нейросеть создать партию на фортепиано, барабанный бит, гитарный риф, пение соловья или шум дождя. Для генерации надо отправить текстовый запрос. Пользователи могут генерировать музыку и на своих данных. К примеру, барабанщик может загрузить записи своих битов и на их основе создавать новые. В блоге компании рассказали, что открытая модель отличается от одноимённой коммерческой. Закрытая версия Stable Audio может генерировать трёхминутные треки с проработанной структурой. А также в ней поддерживается режим Audio-to-Audio, в котором в качестве запроса можно передать уже готовый трек. Модель и вес опубликованы на Hugging Face.

Открытая генерация музыки! StabilityAI опубликовали свою бесплатную модель с открытым кодом Stable Audio Open. Ее уже можно использовать и самое приятное, что модель обучена на бесплатной музыке, так что проблем с авторскими правами возникнуть не должно. Подробнее от самих разработчиков. Модель и веса опубликованы на HuggingFace. proai gpt4o

Стартап Stability AI представил новую открытую модель для создания звуков и музыки Stable Audio Open позволяет создавать музыкальные записи длительностью до 47 секунд на основе текстового описания. Обученная на ~486 000 образцах из библиотек FreeSound и Free Music Archive, модель умеет генерировать барабанные биты, инструментальные риффы, фоновые шумы и другие аудиоэлементы для видео и фильмов. Однако у модели есть и недостатки: она не может создавать полноценные песни и генерировать вокал, а также не предназначена для коммерческого использования. Источник

Stability AI выпустил открытый AI для создания звуков и музыки Модель Stable Audio Open генерирует по текстовому промпту аудиоданные длиной до 47 секунд. Она была обучена на 486 тысячах семплов из бесплатных библиотек. Код Stable Audio Open открыт, но коммерческое использование запрещено. У Stability AI уже есть платный сервис для генерации звуков и музыки Stable Audio, который генерирует треки продолжительностью до 3 минут. — GPT-4o уже доступна в c.aiacademy.me

Stability AI опенсорснули часть функционала Stable Audio — нейросети для генерации музыки и звуков Сеть обучена только на открытых данных, но ее, тем не менее, нельзя использовать в коммерческих целях. Да и работает она сильно обрезанно, по сравнению с закрытой версией: генерирует треки в четыре раза короче и не работает в режиме Audio2Audio. Тем не менее, все что опенсорс, мы любим и уважаем ну если только код не был "позаимствован", как у ребят из Стэнфорда . Подробности и код для игр с моделькой оставили на сайте.