Яндекс Браузер внедряет озвучку видео с сохранением оригинальных голосов

В Яндекс Браузере появилась новая технология перевода видео. Она сохраняет тембр, интонации и ритм говорящего. Вот как это работает на примере знаменитой речи Стива Джобса перед выпускниками Стэнфорда. Подписывайтесь

Автоматический перевод видео в «Яндекс Браузере» научился имитировать оригинальные голоса Нейросеть YandexGPT теперь озвучивает англоязычные видео на русском языке с сохранением тембра, ритма и интонаций героев видео — так, как будто они владеют русским языком. Чтобы этого добиться, модель дополнительно обучили на сотнях тысяч примеров аудио. Также YandexGPT стала точнее переводить смысл сказанного, учитывая стилистические особенности речи, что сделало формулировки более естественными. Новая технология перевода уже доступна в «Яндекс Браузере» на YouTube, в поиске «Яндекса», а также в «VK Видео», «Дзене» и Rutube.

Яндекс Браузер запустил перевод видео нового поколения — с сохранением оригинальных голосов и интонаций. Пока YouTube планирует внедрить подобный автоматический дубляж только через пять лет, пользователи Браузера могут юзать эту фичу уже сейчас. Технически это работает так: нейросеть анализирует голоса, включая тембр, темп и эмоциональные акценты, а затем переносит эти характеристики на русскую речь. Пора пересмотреть шоу с Маском, где он соглашается, что Цукерберг не существует

В Яндекс Браузере обновили технологию закадрового перевода: модель анализирует англоязычную речь и воспроизводит тембр и интонации спикера. Так говорят в Яндексе. А вы уже пробовали? Понравилось?

Яндекс Браузер выкатил обновление перевода видео — теперь нейросеть сохраняет оригинальный голос и интонации спикера. Иностранцы реально звучат так, будто они выучили русский. Алгоритм анализирует англоязычную речь и копирует её особенности на русском. Модель на основе YandexGPT делает формулировки точнее и естественнее. Теперь даже мультяшный голос Свинки Пеппы звучит с британской интонацией на русском. Узнаём подробности здесь. 5 1337

В Яндекс Браузере появился новый дублированый перевод видео с нейросетями. Нейросеть выделяет тембр, ритм и интонации, что делает перевод более естественным. Однако, при тестировании функции пользователи заметели некоторые недостатки, такие как звуковые артефакты и акцент у переведённых спикеров, но в целом отмечается, что уровень точности и естественности перевода значительно улучшился. Функция уже доступна на популярных платформах: YouTube, Rutube, VK Видео, в Дзене и в поиске Яндекса. Однако для её использования потребуется авторизация через Яндекс ID. ================ News Soft Gear Links

Спроси что угодно — умный ИИ уже готов ответить

Как англоязычные блогеры и подкастеры заговорили на русском своими голосами Ребята из Яндекс Браузера совместно со службой синтеза речи прокачали модель для онлайн-перевода видео. Новая версия нейросети анализирует оригинальную аудиодорожку, чтобы подобрать тембр и интонации голоса, которые максимально похожи на изначальное аудио. Это стало возможным благодаря: Интеграции модели голосовой биометрии в языковую модель Управляемости качества синтеза через автометрику UTMOS Сокращению количества генерируемых гипотез в языковой модели и числа итераций диффузионной модели на стадии инференса Использованию общего фонемного представления текста для английского и русского языка Ещё подробнее об архитектуре, вызовах zero-shot-синтеза и быстром инференсе новой модели читайте на Хабре. Подписывайтесь:

Яндекс Браузер научился озвучивать видео голосами оригинальных героев Нейросеть создаёт русский перевод с английского, но сохраняет оригинальные голоса и интонации говорящих. Теперь видео с Трампом звучат так, будто он выучил русский

Яндекс Браузер запустил перевод видео нового поколения — с сохранением оригинальных голосов и интонаций. Пока YouTube планирует внедрить подобный автоматический дубляж только через пять лет, пользователи Браузера могут юзать эту фичу уже сейчас. Технически это работает так: нейросеть анализирует голоса, включая тембр, темп и эмоциональные акценты, а затем переносит эти характеристики на русскую речь. Подписывайся на «ГлавХак» --------------------------------- YouFast VPN™ Купить крипту AML бот

Яндекс Браузер теперь сохраняет голоса при переводе видео Теперь мы можем услышать, как Вин Дизель говорит по-русски! Яндекс Браузер освоил технологию сохранения оригинальных голосов при переводе видеоконтента с английского языка. Нейросеть анализирует голосовые особенности и адаптирует их в реальном времени. С помощью YandexGPT точность перевода значительно возросла, формулировки стали более естественными, учитывая стилистику речи. ———————————————— - Канал про тренды из мира IT, технологий, нейросетей и бизнеса.