Google представила технологию автоматического дубляжа видео с переводом и прорисовкой артикуляции

Учёные уже давно записали профессию переводчика в умирающие, поскольку развитие систем машинного перевода ставит её под угрозу существования не первое десятилетие подряд. Компании Google удалось вывести технологию на новый уровень: искусственный интеллект теперь способен не только переводить речь человека, записанного на видео, но и адаптировать его артикуляцию к результату перевода на другой язык.

Google представила технологию автоматического дубляжа видео с переводом и прорисовкой артикуляции

Другими словами, движения губ человека будут синхронизированы со словами, которые он якобы произносит на другом языке. Работа «универсального переводчика», как незатейливо назвали эту технологию в Google, состоит из нескольких этапов. Сперва система распознаёт речь выступающего на видео человека «на слух» и переводит её в текстовую форму. Данный текст уже переводится на нужный язык, из него тут же синтезируется речь с сохранением тембра и эмоциональной окраски оригинала. Затем под новую речь на другом языке синхронизируются не только движения губ и мимика, но и жестикуляция говорящего. Конечное видео выглядит так, как будто спикер изначально произносил речь на другом языке, чего в реальности он не делал.

Читать также:
Вселенная показала вопросительный знак — «Джеймс Уэбб» запечатлел пару сливающихся галактик необычной формы

Данная технология открывает широкие возможности если не в кинематографе, где дубляж фильмов остаётся сложным процессом, то в сфере образования как минимум. Как справедливо опасается Google, подобный инструмент должен рано или поздно заинтересовать злоумышленников, которые с его помощью захотят фальсифицировать публичные выступления тех же политиков, например. По этой причине корпорация намерена не только распространять технологию «универсального перевода» через доверенных партнёров, но и наделять результирующие видео разного рода водяными знаками, которые позволяют зрителю понять, что ролик является продуктом искусственного интеллекта.

НОВОЕ НА САЙТЕ

Ведущий разработчик Witchfire объяснил, почему отказывается добавлять в игру мультиплеер

Творческий руководитель польской студии The Astronauts Адриан Хмеляж (Adrian Chmielarz) в ответе на претензию пользователя X объяснил, почему команда не хочет добавлять мультиплеер в свой фэнтезийный ролевой шутер Witchfire. ...

Авторы вдохновлённой Castlevania и Hollow Knight стимпанковой 2D-метроидвании SteamDolls выпустили демо-пролог

Разработчики из студии The Shady Gentlemen выпустили бесплатный демо-пролог своей двухмерной стимпанковой метроидвании SteamDolls — Order Of Chaos. Демо-пролог доступен в Steam. В рамках фестиваля «Играм...

Концепция изменилась: пароли из наборов случайных символов больше не считаются хорошими

Использование сложных паролей с комбинацией различных типов символов и регулярная смена паролей признана Национальным институтом стандартов и технологий США (NIST) малоэффективной практикой, сообщает Forbes. Хакеры легко взламывают такие пароли. NIST опубликовал новые рекомендации для...

Intel объявила проблему нестабильности процессоров Raptor Lake решённой — твёрдо и чётко

На минувшей неделе Intel выпустила очередное обновление прошивки для процессоров Core 13 и 14 поколений (Raptor Lake), а теперь официально подтвердила, что этот выпуск микрокода был последним: проблема нестабильной работы чипов, по версии производителя,...

Физики обнаружили явление «отрицательного времени», но путешествовать в прошлое оно не поможет

Учёные из Университета Торонто обнаружили очередное свидетельство контринтуитивного восприятия квантового мира. В серии экспериментов было доказано, что в определённых условиях атомы и фотоны могут вести себя так, как будто время идёт вспять. Работа учёных...