В браузере Яндекс появилась опция синхронного перевода видео в прямой трансляции
Технологии
Сейчас браузер работает в режиме открытого бета-тестирования, так что опробовать нововведение может любой желающий. Потребуется только обновить версию Яндекс до уровня минимум 22.7.2. Со смартфона протестировать закадровый перевод пока не получится. О том, когда завершится процесс проверки и будет запущен основной сервис, разработчики компании пока умалчивают.
В основе технологии лежит использование нейросети. Во время подключения к прямой трансляции робот сразу же получает доступ к видеозаписи и разбирает ее на части. Одна программа переводит текст с одного языка на другой, вторая – распознает пол говорящего (чтобы воспроизвести его речь правильным голосом). Наиболее сложный этап – расстановка знаков препинания и анализ смысловой части, отвечающей за интонации.
