Ваш гик любит разные технологические новшества, это, бублики, давно ни для кого не секрет. Особенно, если это связано с нейронками и машинным обучением, потому что кажется, что всё это какая-то магия, даже если в точности знаешь, как оно работает.
Поэтому не мог пропустить новость: Яндекс обещает помочь нам с вами и переводить своим браузером не только обычные видео на Ютубе, но и прямые трансляции. А это не очень просто, ведь алгоритмы должны пахать на 110% в режиме лайв, т.е. без подготовленного материала для обработки. Как тогда связно озвучивать онлайн? В Яндексе запилили под это дело целых пять нейронок, каждая из которых отвечает за свое: первая переводит речь в текст (как премиальный Телеграм твои голосовухи), вторая определяет пол спикера, третья расставляет знаки препинания (чтобы была интонация) и разделяет этот текст на смысловые фрагменты (чтобы быстрее делать перевод), четвертая переводит эти куски на русский язык, ну и наконец пятая синтезирует речь. Все это занимает от 30 до 50 секунд – столько придется подождать, чтобы начался перевод.
Все эти сложности для того, чтобы гик с каждым из вас могли однажды сразу на русском посмотреть прямые трансляции интересных мероприятий, лекций на разных языках, а презу от Apple, кажется, увидим с синхронным переводом уже этой осенью. Сейчас технология в открытой бете и переводит только ограниченное количество каналов YouTube, но я ради интереса затестил фичу через Я Браузер на компе вот здесь, и выглядит мощно. Конечно, перевод ещё не синхронный, но на то это и бета.