Пока технология работает в режиме открытого бета-тестирования.
Российский IT-гигант — компания Яндекс — запустил новый сервис, который добавляет синхронный перевод в прямые трансляции на YouTube. Так что теперь анонсы долгожданных новинок IT-индустрии, интервью со знаменитостями с красных ковровых дорожек и вдохновляющие трансляции космических запусков можно смотреть на русском языке сразу, не дожидаясь пока появятся переведенные версии.
Закадровый перевод потокового видео — невероятно сложная инженерная задача, поэтому для её решения было применено сразу пять нейросетей. Первая из них распознает аудиодорожку и превращает её в текст. Вторая нейросеть определяет пол спикеров, третья нарезает текст на предложения — расставляет знаки препинания и выделяет из текста части, содержащие законченную мысль. Только четвёртая нейросеть непосредственно переводит полученные куски, а пятая уже синтезирует речь.
Пока технология работает в режиме открытого бета-тестирования — для перевода трансляций на YouTube-каналах из плейлиста.
Источник новости: www.playground.ru
