«Яндекс» протестирует функцию закадрового перевода для видео в своем браузере

«Яндекс» представил прототип машинного перевода видео в своем браузере. Протестировать новую технологию можно на ограниченном количестве видеороликов на английском языке, сообщили в компании.

«В интернете очень много полезного контента, который недоступен людям из-за языкового барьера. И мы близки к тому, чтобы окончательно стереть все границы. «Яндекс.Браузер» давно умеет переводить тексты, в этом году стал переводить изображения, перевод видео — следующий этап. Это большая сложная задача, которую никто в мире еще не решил. Мы тоже в начале пути, но у нас уже есть прототип и понимание, куда двигаться дальше», —  сказал руководитель направления обработки естественного языка в «Яндексе» Дэвид Талбот.

«Яндекс» представил свою самую бюджетную умную колонку

Новая технология, по данным компании, не имеет аналогов в мире и объединила в себе машинный перевод, технологии биометрии, распознавания и синтеза речи. С ее помощью можно смотреть видеозаписи с закадровым переводом. Пока прототип работает только с роликами на английском языке. Разработчики технологии уже опробовали ее на видеозаписях на разные темы. Это видео об изменениях климата, о машинном обучении, истории Плутона и других вещах. Посмотреть видео с закадровым переводом пользователи десктопного браузера могут здесь.

«Яндекс» сменил логотип впервые за 13 лет

Над созданием прототипа работало несколько команд разработчиков — по технологии синтеза речи, «Яндекс.Переводчику», биометрии. Технология позволяет определить пол говорящего и подобрать соответствующий голос. Закадровый голос должен синхронизироваться с картинкой, поэтому переводчик делает паузы, где-то замедляет, а где-то ускоряет речь. В оригинале и переводе реплики часто не совпадают по длине, поэтому за темпом речи следит специальный алгоритм. В скором времени пользователи смогут сами выбирать, какие ролики переводить с помощью новой технологии.