«Яндекс» добавил в браузер функцию закадрового перевода видео

«Яндекс» представил новую функцию, которая позволит пользователям смотреть ролики в браузере с закадровым переводом с одного языка на другой. Об этом сообщается в блоге компании.

По словам разработчиков, новая технология объединяет в себе разработки переводчика, биометрии, а также распознавания и синтеза речи. Она определяет пол говорящего в ролике и подбирает соответствующий голос. Кроме того, алгоритм следит за темпом речи говорящего — за счет этого переводчик делает паузы, замедляет или ускоряет речь, чтобы закадровый голос шел синхронно с изображением.

В своем блоге «Яндекс» представил два ролика: первый — оригинальное видео на английском языке, второе — запись экрана с демонстрацией работы технологии. Ролики опубликованы на YouTube.

Пока что функция работает только с роликами на английском, однако в будущем компания планирует добавить и другие языки. Разработчики также составили плейлист, на котором можно протестировать перевод. Прототип технологии доступен в «Яндекс.Браузере» для Windows и macOS.

Кстати, весной этого года компания добавила в браузер встроенный перевод картинок. Технология работает на страницах сайтов — программа сама находит картинки с иностранных текстом, распознает их и переводит.