NVIDIA представляет нейросеть Fugatto для создания и трансформации звуков

NVIDIA создала ИИ-модель для работы со звуком, это своего рода «фотошоп для звука» Представьте себе технологию, которая может превратить мяуканье кошки в оперное пение или заставить саксофон залаять. ИИ-модель Fugatto состоит из 2,5 млрд параметров. Что она умеет? • Преобразует текстовые описания в музыку и звуки • Трансформирует одни звуки в другие например, партию фортепиано - в человеческий голос • Создает сложные звуковые ландшафты с помощью технологии temporal interpolation Представьте, вы можете сгенерировать реалистичный звук приближающейся грозы, где раскаты грома постепенно нарастают, достигают пика и медленно затихают вдали. И всё это с точным контролем над каждым элементом звуковой картины.

NVIDIA создала ИИ-модель для работы со звуком, это своего рода «фотошоп для звука» Представьте себе технологию, которая может превратить мяуканье кошки в оперное пение или заставить саксофон залаять. ИИ-модель Fugatto состоит из 2,5 млрд параметров. Что она умеет? • Преобразует текстовые описания в музыку и звуки • Трансформирует одни звуки в другие например, партию фортепиано - в человеческий голос • Создает сложные звуковые ландшафты с помощью технологии temporal interpolation Представьте, вы можете сгенерировать реалистичный звук приближающейся грозы, где раскаты грома постепенно нарастают, достигают пика и медленно затихают вдали. И всё это с точным контролем над каждым элементом звуковой картины.

Nvidia представила ИИ-модель Fugatto, которая «понимает и генерирует звук, как это делают люди» Nvidia представила новую экспериментальную генеративную модель ИИ, которую компания описывает как «швейцарский армейский нож для звука». Модель Fugatto Foundational Generative Audio Transformer Opus 1 использует текстовые подсказки для генерации новых или изменения существующих музыкальных, голосовых и звуковых файлов. В создании модели принимали участие разработчики со всего мира, что усилило «многоакцентные и многоязычные возможности модели». «Мы хотели создать модель, которая понимает и генерирует звук, как это делают люди», — рассказал участник проекта и менеджер по прикладным исследованиям звука в Nvidia Рафаэль Валле Rafael Valle .

А вот Nvidia продолжает демонстрировать, что компания не только про чипы, но и про собственные модели, иллюстрирующие красоту генеративного ИИ и крутость продуктов Nvidia — full version uses 2.5 billion parameters and was trained on a bank of Nviidia DGX systems packing 32 H100 Tensor Core GPUs Модель по имени Fugatto от Foundational Generative Audio Transformer Opus 1 описывается как a Swiss Army knife for sound, а сравнение ее с другими моделями звучит немножко токсично: some AI models can compose a song or modify a voice, none have the dexterity of the new offering Музыкантам предлагается использовать новый инструмент на разных стадиях процесса — от прототипирования до улучшения качества имеющихся треков. Модель умеет создавать неожиданные эффекты: For instance, Fugatto can make a trumpet bark or a saxophone meow. Whatever users can describe, the model can create. Черрипики в приложенном треке звучат впечатляюще. Осталось дождаться реакции и без того в последнее время нервных музыкантов:

Как звучат мяукающая труба или лающий саксофон — знает этот ИИ : Nvidia представила модель, которая может собирать немыслимые сочетания звуков на основе текстовых описаний.

Nvidia создала «швейцарский армейский нож для звука» Nvidia представила ИИ-модель Fugatto Foundational Generative Audio Transformer Opus 1 , способную генерировать и изменять музыкальные, голосовые и звуковые файлы по текстовым подсказкам. Модель, созданная с участием разработчиков со всего мира, поддерживает многоязычные и многоакцентные сценарии. Она может использоваться для прототипирования музыки, разработки языковых инструментов, создания звуков для видеоигр и других задач, включая генерацию сложных звуковых комбинаций. Публичный доступ к Fugatto пока не предоставлен. Мы из будущего

NVIDIA представила нейросеть Fugatto, которая может создавать новые звуки и менять существующие Производитель видеокарт продемонстрировал новую модель искусственного интеллекта для создания музыки и аудио. Это нейросеть Fugatto, которая может изменять голоса и генерировать новые звуки — технология ориентирована на создателей музыки, фильмов и видеоигр. Читать далее

NVIDIA создала ИИ-модель для работы со звуком, это своего рода «фотошоп для звука» Представьте себе технологию, которая может превратить мяуканье кошки в оперное пение или заставить саксофон залаять. ИИ-модель Fugatto состоит из 2,5 млрд параметров. Что она умеет? • Преобразует текстовые описания в музыку и звуки • Трансформирует одни звуки в другие например, партию фортепиано - в человеческий голос • Создает сложные звуковые ландшафты с помощью технологии temporal interpolation Представьте, вы можете сгенерировать реалистичный звук приближающейся грозы, где раскаты грома постепенно нарастают, достигают пика и медленно затихают вдали. И всё это с точным контролем над каждым элементом звуковой картины.

Nvidia представила Fugatto - ИИ для создания и модификации звука Nvidia анонсировала Fugatto - новую модель генеративного ИИ, способную создавать музыку и звуковые эффекты, а также изменять уже существующий аудиоконтент. Что умеет Fugatto: 1 Генерировать новые звуки, например, заставить трубу "лаять" как собака. 2 Преобразовывать запись, изменяя акцент или эмоциональный тон голоса. 3 Трансформировать мелодию с пианино в вокальную линию. Nvidia пока не планирует публичный релиз технологии, опасаясь рисков её возможного злоупотребления. #AI #нейросети #технологии #аудио #nvidia

Nvidia презентовала новый AI музыкальный редактор Fugatto, который способен создавать уникальные звуки и музыку на основе текстовых и звуковых вводов. Как показано в этом видео Fugatto позволяет составлять песни даже на основе самых диких подсказок, например: «Создай вой саксофона, лай, а затем электронную музыку с лаем собак». Fugatto даже может преобразовать звук чьего-либо голоса, изменив акцент или придав ему другой тон, например, сердитый или спокойный. Fugatto также позволяет редактировать музыку, акцентируя вокал, добавляя инструменты и меняя мелодию. Однако пока Nvidia не сообщает, когда Fugatto станет доступен для широкой публики. ================