Технологии Яндекса переведут любое видео в интернете


Яндекс показал прототип машинного перевода видео. Новая технология, не имеющая аналогов в мире, объединит в себе машинный перевод, технологии биометрии, распознавания и синтеза речи. Благодаря ей пользователи Яндекс.Браузера смогут смотреть ролики на иностранном языке с закадровым переводом.

Дэвид Талбот, руководитель направления обработки естественного языка в Яндексе:

«В интернете очень много полезного контента, который недоступен людям из-за языкового барьера. И мы близки к тому, чтобы окончательно стереть все границы. Яндекс.Браузер давно умеет переводить тексты, в этом году стал переводить изображения, перевод видео — следующий этап. Это большая сложная задача, которую никто в мире еще не решил. Мы тоже в начале пути, но у нас уже есть прототип и понимание, куда двигаться дальше».

Прототип работает только с роликами на английском языке. Разработчики технологии уже опробовали ее на видеозаписях на разные темы. Среди них есть видео про изменение климата, машинное обучение, историю Плутона и другие не менее интересные вещи. Посмотреть видео с закадровым переводом пользователи десктопного Яндекс.Браузера могут здесь.

Над созданием прототипа работало несколько команд. Сейчас в нем применяются технология синтеза речи, разработки Яндекс.Переводчика и биометрия. Она позволяет определить пол говорящего и подобрать соответствующий голос. А чтобы закадровый голос совпадал с картинкой, переводчик делает паузы, где-то замедляет, а где-то ускоряет речь. Дело в том, что в оригинале и переводе реплики часто не совпадают по длине, поэтому за темпом речи следит специальный алгоритм.

Работа над прототипом продолжается. Уже скоро пользователи смогут сами выбирать, какие ролики переводить с помощью новой технологии.

В будущем Яндекс также планирует добавить поддержку перевода видео в свои мобильные приложения — Яндекс.Браузера и в приложение Яндекс. Точные сроки запуска «полноценного» перевода в браузере пока не сообщаются.

Источник: Пресс-служба Яндекса
subscribe

Подпишитесь на рассылку SearchEngines

— Статьи мировых экспертов

— Аналитические обзоры

— Важные новости

— Горячие темы с нашего форума

preview IT-разработчики получат доступ к обезличенным медицинским данным россиян

IT-разработчики получат доступ к обезличенным медицинским данным россиян

Для разработки систем поддержки врачебных решений
preview YouTube начал автоматически выделять главы на видео

YouTube начал автоматически выделять главы на видео

С помощью машинного обучения
preview Яндекс закрыл сделку по покупке банка «Акрополь»

Яндекс закрыл сделку по покупке банка «Акрополь»

Сумма сделки составила 1,1 млрд рублей
preview Google реализовал возможность быстрого удаления истории в поиске

Google реализовал возможность быстрого удаления истории в поиске

В смартфонах на iOS
preview В Google Chrome для ПК появится инструмент для скриншотов

В Google Chrome для ПК появится инструмент для скриншотов

В новом меню «Поделиться»
preview В Яндекс.Дзене появились уведомления о нарушениях

В Яндекс.Дзене появились уведомления о нарушениях

Начиная с сегодняшнего дня