Функция закадрового перевода доступна для видеохостинга YouTube.
Новая технология синхронного перевода прямых трансляций была запущена российским «Яндексом» еще 5 августа 2022 года, хотя некоторые СМИ узнали о ней только сейчас. Функция закадрового перевода доступна на YouTube.
Как писали журналисты ЦСН-ТВ, отныне россияне могут смотреть зарубежные презентации в прямом эфире, не дожидаясь пока в сети появятся записи с переводом и не обращаясь на каналы блогеров.
Алгоритм синхронного перевода строится на четырех нейросетях, одна из которых отвечает за распознание аудио и превращает его в текст, а вторая определяет пол спикера по биометрии.
Третья же отвечает за расставление знаков препинания, а также выделяет из текста особые смысловые фрагменты, содержащие в себе законченную мысль. Последняя нейросеть, как вы уже могли догадаться, отвечает за перевод на русский язык.
В будущем разработчики планируют добавить подобную функцию на стриминговые сервисы, вроде Twitch. Также будут добавлены новые языки.
