Компания «Яндекс» запустила технологию автоматического закадрового переводапрямых трансляций в своем браузере. Об этом говорится в поступившем в AdIndexсообщении. Пока технология работает в режиме открытого бета-тестирования — дляперевода трансляций на YouTube-каналах изплейлиста.

«Следующий шаг — перевод потоковых трансляций и видеороликов не только наYouTube, но и, например, в Twitch. Мы научили нейросети переводить трансляциина английском, немецком, французском, итальянском и испанском. Далее мы добавимновые пары европейских языков, а также китайский, японский и другие», —цитирует пресс-служба руководителя приложения «Яндекс» и «Яндекс Браузера»Дмитрия Тимко.

Над синхронным переводом видео работают несколько нейросетей: однараспознает аудио и превращает его в текст, другая определяет пол спикера побиометрии, третья расставляет знаки препинания и выделяет из текста части,которые содержат законченную мысль — их забирает четвертая нейросеть,отвечающая за перевод, который синтезируется на русском языке.

Протестировать технологию может любой пользователь «Яндекс Браузера» насвоем компьютере.

Прототип автоматического перевода видео «Яндекс» анонсировал в июле прошлогогода. Тогда технология работала только с роликами на английском языке.