Функция перевода видео в яндекс браузере

Как включить функцию перевода видео в яндекс браузере

Яндекс активно развивает новые технологии. Не так давно в сети появилась информация о том, что появился сервис перевода видео на русский язык. Все что Вам нужно сделать — нажать пару кнопок и видео начнет обрабатывать специальный бот. Он озвучит мужским голосом мужчин и женским женщин.

Стоит заметить, что иногда перевод занимает определенное время. В таком случае Вы получите оповещение, когда закончится обработка видео.

Источник

Яндекс.Браузер получил функцию автоматического перевода англоязычных видеороликов

Компания Яндекс представила новую функцию автоматического перевода видео в YouTube, Vimeo и в других популярных видеоплатформах. Это настоящий закадровый перевод с поддержкой двух голосов: мужского и женского

Технология перевода работает в Яндекс.Браузере для десктопов и Яндекс.Браузере для Android, а также в мобильном приложении Яндекс для Android и iOS.

Теперь пользователи могут смотреть англоязычные научно-популярные программы, кулинарные шоу, лекции Элона Маска и Ричарда Фейнмана, стендапы и видеоблоги в русской озвучке. Технология реализована следующим образом, оригинальный звуковой поток приглушается и на него накладывается озвученный переведенный текст. Используются два голоса: мужской голос и женский голос, который также является голосом голосового помощника Алисы.

Яндекс переводчик озвучивает видео. Как включить перевод видео в Яндекс браузере?

Руководитель Яндекс.Браузера Роман Иванов заявил:

Автоматический перевод видео открывает перед людьми целый мир, который был недоступен из-за языкового барьера. Полностью стереть языковые границы в интернете — одна из наших главных задач. Мы приступили к её решению ещё в 2011 году и сейчас умеем переводить все основные виды контента: текст, изображения, видео. Дальше мы будем добавлять в перевод видео новые языковые пары и голоса, помогая людям узнавать новое и получать от этого удовольствие.

Таким образом, теперь пользователи могут перевести практически любое видео из YouTube, Vimeo и других популярных платформ. Функция перевода поддерживается в Яндекс.Браузере для Windows, macOS, Linux и Android и в приложении Яндекс для Android и iOS.

Как удалить вкладки в Яндексе на телефоне ксиоми

Перевод выполняется в несколько этапов. На первом этапе распознается речь, она преобразуется в текст, которая разбивается на предложения помощью нейронных сетей. После этого определяется пол говорящего, предложения переводятся на русский язык и синтезируется голос. Наконец, остается совместить перевод с видеорядом. Это непростая задача, потому что приложения в русском языке длиннее, чем на английском.

Подробная информация по технической реализации доступна на «Хабре». Чтобы посмотреть видео с русской озвучкой, нужно нажать на кнопку в плеере и немного подождать. Процесс перевода займет несколько минут, а по его завершению вы получите уведомление.

Источник

Яндекс Браузер круто переводит видео. Как перенести его функцию в Chrome, Edge, Firefox, Safari

Яндекс Браузер круто переводит видео. Как перенести его функцию в Chrome, Edge, Firefox, Safari

Все браузеры очень похожи друг на друга (особенно те, что работают на одном и том же движке). Однако веб-обозреватель Яндекса сильно выделяется на фоне всех других преимущественно функцией закадрового перевода видео — браузер переозвучивает оригинальную аудиодорожку в ролике, но на русском языке, и воспроизводит её поверх исходного видео. Благо этой опцией можно воспользоваться и в других веб-обозревателях благодаря специальному скрипту, размещённому на GitHub. В этой статье рассматриваем, как его установить, что это вообще такое и какие есть ограничения.

Содержание

Как установить закадровый перевод видео Яндекса

Поддерживаются практически любые программы: не только Chrome, Edge и прочие на движке Chromium, но и Firefox с Safari.

  1. Установите расширение Tampermonkey (для Safari оно платное, можно заменить утилитой UserScripts) — это менеджер скриптов, который позволит запускать нужный алгоритм для закадрового перевода видео.
  2. Загрузите специальный скрипт — по нажатию кнопки «Установить» вкладка закроется.

Яндекс Браузер круто переводит видео. Как перенести его функцию в Chrome, Edge, Firefox, Safari

Проверить, установился ли он, можно в меню расширения по кнопке «Панель управления». На всякий случай файл скрипта прикреплён к этой статье (в самом низу) — его получится установить вручную, если с GitHub что-то случится.

Яндекс Браузер круто переводит видео. Как перенести его функцию в Chrome, Edge, Firefox, Safari

Теперь при открытии видео на YouTube поверх иконки расширения Tampermonkey будет появляться красный кружок-индикатор, а над видеоплеером будет виджет, предлагающий выполнить закадровый перевод.

Яндекс Браузер круто переводит видео. Как перенести его функцию в Chrome, Edge, Firefox, Safari

Если развернуть расширенные настройки, получится включить автоматический перевод роликов и отрегулировать громкость переведённой озвучки.

Кратко: как работает закадровый перевод Яндекса

До тестирования этой технологии может показаться, что она простая в исполнении и плохо работает: перевод голоса давно есть в том же Google Translate, а его машинная речь оставляет желать лучшего. Но на практике всё совсем наоборот — это комбинация очень сложных алгоритмов, и на выходе получается действительно отличный результат.

Закадровый перевод и озвучка осуществляются в несколько этапов:

    Распознавание и переработка речи
    На этом этапе алгоритмы стараются обработать речь — в ролике может быть не один говорящий, и если просто преобразовать все услышанные слова в текст, а затем перевести его, то получится каша. Нейросеть пытается сгруппировать слова в смысловые сегменты, расставить знаки препинания (это очень важно даже в видео с одним ведущим) и вычистить мусор.

Если в видео есть вручную добавленные субтитры, то нейросеть использует их, а не оригинальную аудиодорожку.

Хотя некоторые из этих этапов происходят параллельно, вся технология целиком очень сложная и ресурсоёмкая — из-за этого нужно время, прежде чем закадровый перевод будет готов.

Какие ограничения по сравнению с Яндекс.Браузером

Хотя скрипт из этой статьи задействует технологию Яндекса, неофициальный закадровый перевод в других браузерах работает несколько хуже из-за определённых ограничений.

  • Популярные видео не переводятся мгновенно
    В Яндекс.Браузере закадровая озвучка популярных видео с большим количеством просмотров происходит моментально (видимо, компания хранит готовую озвучку этих роликов на своих серверах, а не делает её каждый раз заново). При использовании скрипта даже популярные ролики проходят все этапы закадрового перевода, поэтому приходится ждать — около 1 минуты за каждые 10 минут видео.

Яндекс Браузер круто переводит видео. Как перенести его функцию в Chrome, Edge, Firefox, Safari

Яндекс Браузер круто переводит видео. Как перенести его функцию в Chrome, Edge, Firefox, Safari

Несмотря на все ограничения, скрипт выполняет свою функцию — переозвучивает ролики на русском языке, и делает это очень хорошо. Как и технология в Яндекс.Браузере, он поддерживает не только перевод с английского, но и с немецкого, французского и испанского языков.

Источник
Рейтинг
Загрузка ...