StabilityAI обновили свой Stable Audio до версии 2.0, добавив возможность допиливания треков текстом

Stability запустили своего конкурента Suno — StabilityAudio. Таким же вирусным как Suno оно не будет — пока там только инструменталы, без голоса и слов. Но количество проблем в самой музыке существенно меньше, попробуйте сами. Ну и большой плюс, исходные коды доступны правда, готовых весов пока нет . Чуть более подробно в статье от самих стабилити.

Stability AI выпустили новую модель своей нейронки — Stable Audio 2. Звучит хайпово, потестить можно тут, сама модель тут, а ещё запустили бесконечный стрим с музыкой!

Если AI, то с музыкой: новый сервис генерации аудио Компания Stability AI представила новую разработку под названием Stable Audio 2. Сервис был натренирован на базе компании AudioSparx, которая составляет более чем 800 тысяч треков. Новая модель умеет: создавать при помощи text-to-audio полноценные треки с частотой дискретизации в 44.1 кГц в стерео длиной до 3 минут работать в режиме audio-to-audio, то есть преобразовывать другие музыкальные сэмплы по запросу загруженные файлы не должны нарушать авторские права преобразовывать загруженный вокал в музыку: к примеру, из голоса можно создать партию ударных для джаза или танцевальной музыки. Эта функция пока что находится в бета-версии Первые впечатления пользователей неоднозначны: кто-то утверждает, что звук, который генерирует Stable Audio 2, чище, чем у конкурента Suno. При этом Suno и Loudly превосходят Stable Audio 2 в вариативности, а также умеют создавать вокал. Из преимуществ нового сервиса перед конкурентами можно отметить «юридическую чистоту» производимого материала, так как он обучен на треках, не нарушающих авторские права. Помимо этого, компания-создатель запустила Stable Radio на YouTube, где транслирует аудиозаписи, созданные при помощи Stable Audio 2.

StabilityAI уже без Мостака обновили свою Stable Audio до версии 2.0. Первая, которая вышла в сентябре, была не айс. Вторая, судя по сэмплам, тоже не блещет. После Suno и Loudly я ничего ИИшного не могу слушать. Надо будет потестировать audio-to-audio от стабилити. Можно загружать трек и допинывать его текстом до годного. Мечтаю сделать новые ИИ аранжировки для "Радио Африка". Но Stable Audio 2.0 не умеет в вокал. А технокаша или эмбиенткисель в исполнении ИИ уже приедаются...

Stability AI это те, кто сделали Stable Diffusion, SDXL и другие модели выпустили свою новую нейросеть Stable Audio 2.0. Как можно догадаться из названия, она предназначена для генерации музыки. Вот тут можно попробовать сгенерировать себе трек 3-минутной длительности бесплатно доступно не больше 20 треков в месяц, остальное за денежку . Здесь же можно послушать стрим, где нейросеть бесконечно генерирует музыку слегка похоже на Lo-Fi Girl . А ещё нейросеть умеет превращать загруженную музыку в музыку другого жанра и даже делать из человеческой речи например, битбокса мелодии в нужном стиле. Несмотря на то, что Stability AI обычно выкладывают свои модели в OpenSource, у этой модели пока не выложены ни документация, ни веса. Возможно, Stability AI не будет этого делать вовсе, поскольку при обучении Stable Audio 2.0 использовался только лицензионный контент через датасет AudioSparx. Но, в любом случае, музыканты уже напряглись.