«Яндекс» представила технологию русского дубляжа видео в реальном времени. У неё нет аналогов в мире
«Яндекс» показала новую технологию, которая автоматически переводит видео с английского и озвучивает его на русском в режиме реального времени.
Что случилось
«Яндекс» показала новую технологию, которая автоматически переводит видео с английского и озвучивает его на русском в режиме реального времени.
С помощью этой функции в Яндекс.Браузере можно будет спокойно смотреть и понимать ролики на английском, даже если вы не знаете иностранного языка. Всё озвучит диктор.
Как работает
Новая технология использует машинный перевод, технологии биометрии, распознавания и синтеза речи.
Алгоритмы определяют пол говорящего и подбирают нужный голос. Чтобы реплики совпадали по длине, технология то ускоряет, то замедляет голос переводчика.
Вот, как это выглядит:
Как попробовать
Пока это только прототип. Протестировать функцию машинного перевода можно на определённых видео из этого плейлиста. Это можно сделать из Яндекс.Браузера.
2К открытий2К показов
В этой статье помогаем ускорить ознакомление с основными типами AI и показываем принципы принятия решений по внедрению AI.
Редактирование текстов, перевод с озвучкой и саммари видео — новые нейронки в Яндекс.Браузере.
Нейросеть YandexGPT (YaLM 2.0) научилась создавать тексты, и процесс написания текстов можно видеть в режиме реального времени.
Минобрнауки России опубликовало проект образовательной программы, посвящённой ИИ. По этой программе начнут обучение в 2023 году.