«Яндекс» запустил функцию автоматического закадрового перевода англоязычных видео в своем браузере и приложении. Она может работать в том числе на YouTube и Vimeo. Ранее компанию обвинили в краже этой технологии, но IT-гигант обвинения отрицает
«Яндекс» начал предлагать автоматически перевести англоязычные видеоролики в своем браузере и приложении, сообщила Forbes пресс-служба компании.
Чтобы посмотреть видео в русской озвучке, нужно нажать на кнопку в плеере и немного подождать. Процесс перевода занимает несколько минут. Когда все будет готово, придет уведомление.
«Перевод получается закадровым — оригинальная дорожка приглушается, и на нее накладывается новая. Используются два голоса: для мужских голосов — мужской, для женских — женский; это голос «Алисы», — говорится в сообщении.
Перевод происходит в несколько этапов: распознавание речи, трансформация ее в текст и разбивка на предложения с помощью нейронных сетей. После этого система определяет пол говорящего, переводит предложения на русский язык и синтезирует голос. «Остается совместить перевод с видеорядом. Это совсем нетривиальная задача, потому что в русском языке предложения длиннее, чем в английском. Здесь на помощь снова приходят нейросети», — говорится в сообщении компании.
Технология позволяет перевести англоязычные ролики на YouTube, Vimeo и других платформах при просмотре в «Яндекс.Браузере» для Windows, macOS, Linux и Android, а также в приложении «Яндекс» для Android и iOS.
«Автоматический перевод видео открывает перед людьми целый мир, который был недоступен из-за языкового барьера. Полностью стереть языковые границы в интернете — одна из наших главных задач», — приводятся в сообщении слова руководителя «Яндекс.Браузера» Романа Иванова.
Он также добавил, что компания начала работу в этом направлении в 2011 году и сейчас умеет переводить все основные виды контента: текст, изображения, видео. «Дальше мы будем добавлять в перевод видео новые языковые пары и голоса, помогая людям узнавать новое и получать от этого удовольствие», — заключил он.
Ранее «Яндекс» обвинили в краже идеи для сервиса перевода видео. Российский сервис AllMyBlog 1 сентября подал в Aрбитражный суд Москвы иск против IT-гиганта, заявив, что он тоже вел подобные разработки и что «Яндекс» видел их первые результаты, а также презентацию с описанием технологии и письмо с предложением о возможном сотрудничестве. Переговоры длились до 7 июля, но на следующий день «Яндекс» заявил о разработке собственного сервиса для перевода видео, утверждает истец.
«Яндекс», в свою очередь, заявил Forbes, что не вел переговоры об инвестициях с «Оллмай.блог» и не запрашивал у компании какие-либо математические модели и другие компоненты технологии, как утверждает сервис. «В функции перевода видео мы используем только собственные технологии: машинный перевод, биометрию, распознавание и синтез речи. Некоторые из этих технологий, например машинный перевод, разработаны «Яндексом» более 10 лет назад», — сообщил Forbes представитель компании.