Яндекс запустил Перевод видео онлайн

«Яндекс» запустил в полном формате сервис закадрового перевода видео. Теперь не нужно читать субтитры, чтобы понять суть видеоролика. «Яндекс» переведет видео сам.

Чтобы посмотреть видео в русской озвучке, пользователю необходимо нажать на кнопку в плеере и подождать какое-то время. Процесс перевода занимает несколько минут, после чего юзеру придет уведомление.

Перевод получается закадровым. При этом оригинальная дорожка приглушается и на нее накладывается новая. Для перевода используются два голоса: мужской и женский (Алиса).

Перевод происходит в несколько этапов. Сначала «Яндекс» распознает речь, превращает ее в текст и с помощью нейронных сетей разбивает на предложения. Потом определяет пол говорящего, переводит предложения на русский язык и синтезирует голос. Остается совместить перевод с видеорядом. Это совсем не тривиальная задача, потому что в русском языке предложения длиннее, чем в английском. Здесь на помощь снова приходят нейросети.

Перевод доступен в «Яндекс.Браузере» для операционных систем Windows, macOS, Linux и Android, а также в приложении «Яндекс» Android и iOS.

В дальнейшем планируется добавить в перевод видео новые языковые пары и голоса.