Яндекс Браузер круто переводит видео. Как перенести его функцию в Chrome, Edge, Firefox, Safari

Она работает действительно очень хорошо — можно комфортно смотреть зарубежные ролики с двухголосой озвучкой

Все браузеры очень похожи друг на друга (особенно те, что работают на одном и том же движке). Однако веб-обозреватель Яндекса сильно выделяется на фоне всех других преимущественно функцией закадрового перевода видео — браузер переозвучивает оригинальную аудиодорожку в ролике, но на русском языке, и воспроизводит её поверх исходного видео. Благо этой опцией можно воспользоваться и в других веб-обозревателях благодаря специальному скрипту, размещённому на GitHub. В этой статье рассматриваем, как его установить, что это вообще такое и какие есть ограничения.

Содержание

Как установить закадровый перевод видео Яндекса
Кратко: как работает закадровый перевод Яндекса
Какие ограничения по сравнению с Яндекс.Браузером

Как установить закадровый перевод видео Яндекса

Поддерживаются практически любые программы: не только Chrome, Edge и прочие на движке Chromium, но и Firefox с Safari.

  • Установите расширение Tampermonkey (для Safari оно платное, можно заменить утилитой UserScripts) — это менеджер скриптов, который позволит запускать нужный алгоритм для закадрового перевода видео.
  • Загрузите специальный скрипт — по нажатию кнопки «Установить» вкладка закроется.

    Яндекс Браузер круто переводит видео. Как перенести его функцию в Chrome, Edge, Firefox, Safari

    Проверить, установился ли он, можно в меню расширения по кнопке «Панель управления». На всякий случай файл скрипта прикреплён к этой статье (в самом низу) — его получится установить вручную, если с GitHub что-то случится.

    Яндекс Браузер круто переводит видео. Как перенести его функцию в Chrome, Edge, Firefox, Safari

  • Теперь при открытии видео на YouTube поверх иконки расширения Tampermonkey будет появляться красный кружок-индикатор, а над видеоплеером будет виджет, предлагающий выполнить закадровый перевод.

    Яндекс Браузер круто переводит видео. Как перенести его функцию в Chrome, Edge, Firefox, Safari

    Если развернуть расширенные настройки, получится включить автоматический перевод роликов и отрегулировать громкость переведённой озвучки.

    Кратко: как работает закадровый перевод Яндекса

    До тестирования этой технологии может показаться, что она простая в исполнении и плохо работает: перевод голоса давно есть в том же Google Translate, а его машинная речь оставляет желать лучшего. Но на практике всё совсем наоборот — это комбинация очень сложных алгоритмов, и на выходе получается действительно отличный результат.

    Закадровый перевод и озвучка осуществляются в несколько этапов:

  • Распознавание и переработка речи
    На этом этапе алгоритмы стараются обработать речь — в ролике может быть не один говорящий, и если просто преобразовать все услышанные слова в текст, а затем перевести его, то получится каша. Нейросеть пытается сгруппировать слова в смысловые сегменты, расставить знаки препинания (это очень важно даже в видео с одним ведущим) и вычистить мусор.

    Если в видео есть вручную добавленные субтитры, то нейросеть использует их, а не оригинальную аудиодорожку.

  • Определение пола говорящего
    Технология Яндекса может озвучивать ролики женским голосом (Алисы) и мужским. Для этого алгоритмы должны определить пол людей, присутствующих на видео.

  • Машинный перевод с учётом пола
    По сути, на этом этапе происходит стандартный перевод уже готового текста, но с нюансом: алгоритмы учитывают пол говорящих, чтобы выбирать правильные местоимения, а также корректные формы глаголов и прилагательных.

  • Синтез речи с учётом разницы языков
    Переведённая речь в среднем на 10–30% длиннее, чем английская. Из-за этого может быть ощутимый рассинхрон между происходящим на экране и озвучкой. Умные технологии Яндекса стараются прежде всего сократить ненужные паузы между фразами и словами, а уже затем, если этого окажется недостаточно, ускоряют русскую озвучку.
  • Хотя некоторые из этих этапов происходят параллельно, вся технология целиком очень сложная и ресурсоёмкая — из-за этого нужно время, прежде чем закадровый перевод будет готов.

    Какие ограничения по сравнению с Яндекс.Браузером

    Хотя скрипт из этой статьи задействует технологию Яндекса, неофициальный закадровый перевод в других браузерах работает несколько хуже из-за определённых ограничений.

    • Популярные видео не переводятся мгновенно
      В Яндекс.Браузере закадровая озвучка популярных видео с большим количеством просмотров происходит моментально (видимо, компания хранит готовую озвучку этих роликов на своих серверах, а не делает её каждый раз заново). При использовании скрипта даже популярные ролики проходят все этапы закадрового перевода, поэтому приходится ждать — около 1 минуты за каждые 10 минут видео.

      Яндекс Браузер круто переводит видео. Как перенести его функцию в Chrome, Edge, Firefox, Safari


    • Поддерживается только YouTube
      Яндекс.Браузер может переводить общедоступные ролики на многих популярных платформах, однако скрипт работает только с видеозаписями на YouTube (тоже с общедоступными).

    • Не присылается уведомление о готовности ролика
      Поскольку закадровая озвучка не происходит мгновенно, Яндекс.Браузер присылает пользователям уведомление о её готовности — после запроса перевода можно даже закрыть вкладку. Скрипт этого делать не умеет, приходится ставить видео на паузу и ждать, пока всё будет готово.

    • Исходная аудиодорожка не делается тише
      Яндекс.Браузер автоматически приглушает оригинальный звук (но не убирает его полностью). В случае использования скрипта громкость исходного видео придётся делать тише вручную, иначе аудиодорожки будут накладываться друг на друга.

    • Субтитры с переводом недоступны
      Помимо переведённой озвучки, Яндекс.Браузер способен показывать ещё и субтитры на языке оригинала — при клике на слово отображается его перевод внутри предложения. В скрипте этой функции нет.

      Яндекс Браузер круто переводит видео. Как перенести его функцию в Chrome, Edge, Firefox, Safari


    • Иногда встречаются баги
      При использовании скрипта случается, что надпись об ожидании перевода зависает — приходится несколько раз перезагружать страницу, чтобы закадровая озвучка стала доступна (но она появляется сразу, заново ждать не приходится). В Яндекс.Браузере такой проблемы нет.

    Несмотря на все ограничения, скрипт выполняет свою функцию — переозвучивает ролики на русском языке, и делает это очень хорошо. Как и технология в Яндекс.Браузере, он поддерживает не только перевод с английского, но и с немецкого, французского и испанского языков.


    Материалы по теме:
    • Что с Firefox сейчас? Как дела у Mozilla и что ей делать, чтобы браузер выжил
    • За год браузер Brave удвоил пользователей — я протестировал и понял причину. Техногиковские инструменты
    • 7 браузеров на Chromium для Android, которые лучше Chrome. Для продвинутых
    • 2 часа ходил за роботом-доставщиком Яндекса и разобрался, как всё устроено. Это — будущее
    • 10 скрытых опций Chrome, о которых мало кто знает. Например, встроенная подмена локации

    Скачать скрипт для закадрового перевода

    21,4 КБ

    Вирусы не найдены QR
    text/plain




    Источник trashbox.ru

    İlgili statyalar

    Отключаем уведомления от сайтов в десктопных браузерах: Chrome, Firefox, Opera, Safari, Edge

    Иногда веб-версии популярных и не очень интернет-ресурсов отправляют действительно важную информацию, но это случается редко Популярные браузеры умеют передавать пользователю уведомления от конкретных сайтов. Веб-версии многих интернет-ресурсов отправляют своим посетителям запрос на будущую отправку сообщений через систему Push, а потом «радуют» новой информацией сомнительной полезности по несколько раз в день. Уведомления от сайтов когда-то могли стать очень полезным инструментом, но в итоге, по большому счёту, превратились в систему спама для привлечения трафика. Именно поэтому вопрос отключения уведомлений конкретных сайтов не теряет актуальности — более того, многие полностью блокируют систему Push. Отключаем уведомления от конкретных сайтов в браузере Прежде всего, важно…

    Как отключить назойливые уведомления сайтов о Cookie. Есть нюансы

    Это легко сделать в браузерах для компьютеров благодаря расширениям. Среди популярных только одно платное, и то наполовину В файлах Cookie записывается информация о посетителе сайта (дата и время визита, предпочитаемый язык, IP-адрес и прочее) — она призвана упростить использование интернета (например, чтобы каждый раз не вводить логин и пароль или чтобы сохранялась корзина покупок), но на практике такая информация может использоваться для слежки. Из-за этого несколько лет назад европейский регламент о защите данных GDPR обязал сайты запрашивать у пользователей разрешение на сохранение куки-файлов. Интернет должен был стать более прозрачным, однако на деле всё только усложнилось: теперь при первом посещении каждый…

    У России есть свои браузеры, не только от Яндекса. Какими можно пользоваться

    Из-за вопросов с сертификатами некоторые отечественные сайты будут открываться только в браузерах, выпущенных на территории РФ Минцифры РФ и портал «Госуслуги» рекомендуют интернет-пользователям из России использовать отечественные веб-браузеры. Чтобы обосновать этот совет, организации ссылаются на работу местных центров сертификации, обеспечивающих безопасный сетевой сёрфинг. Некоторые из наших сайтов в ближайшем будущем смогут открываться только через российские браузеры. Указанные структуры рекомендуют обратить внимание на Яндекс.Браузер или Atom от Mail.ru. Впрочем, чтобы определиться с выбором приложения, есть также смысл попробовать «Спутник» и Uran от платформы uCoz. Несмотря на то что все варианты созданы на базе движка Chromium, определиться с фаворитами будет несложно. Содержание…

    Почему музыка в фильмах намного громче слов — как их уравнять

    Сделать это можно, но действительно рабочих способов очень мало — по сути, для Windows он лишь один (но простой и бесплатный) При просмотре фильмов и сериалов дома многие не раз замечали, что диалоги порой какие-то тиховатые, а музыка и звуковые эффекты слишком уж громкие (особенно в экшен-сценах). Чаще всего это просто доставляет дискомфорт, но иногда такое несоответствие громкости разных аудиодорожек становится настоящем проблемой — к примеру, если смотреть кино ночью без наушников, когда любой неожиданно громкий звук из динамиков может разбудить членов семьи. В этой статье разбираемся, почему вообще в фильмах и сериалах бывают такие перепады громкости и как с…

    Песня о татарском колодце на гагаузском языке — видео и текст

    GagauzNews, 23 августа. Мы рассказывали вам о древнем татарском колодце, который находится в селе Кириет-Лунга Чадыр-Лунгского района. Об этом татарском колодце в  Кириет-Лунге даже есть песня на гагаузском языке. Представляем вашему вниманию текст этой песни, а также перевод песни на русский язык. Tatar pınarı Текст песни предоставил Георгий Радов Редакция на гагаузском языке: Гюллю Каранфил Derä boyunda,  çayır içindä Vardı bir pınar küüyä kafadar Kűçűktű onun, onun o boyu Sızardı tatlı ,  pek tatlı suyu Tatar pınarı , kısmet pınarı Neredä o boyun, o tatlı suyun O tatlı sudan pek çok içildi Nekadar ekmek ondan yapıldı Yanında gençlär annaşardılar Pınar…