Amazon внедряет ИИ, подстраивающий губы актёров под озвучку

В четверг стриминговый сервис Prime Video объявил о запуске новой функции для синхронизации губ с дубляжом. Технология должна менять движения рта актёров так, чтобы они соответствовали репликам на английском языке. Пока неясно, не приведёт ли это к странным искажениям лиц.

Компания сообщила, что на первом этапе функция будет работать только с английской версией немецкого сериала «Maxton Hall». В будущем Amazon собирается добавить её в другие проекты.

Вице-президент по технологиям Prime Video и Amazon MGM Studios Раф Солтанович заявил, что компания постоянно разрабатывает инструменты для улучшения просмотра. По его словам, синхронизация губ должна сделать знакомство зрителей с контентом со всего мира более плавным и иммерсивным. Об этом сообщила The New York Times.

Пока неизвестно, какую часть работы автоматизирует ИИ и как именно Amazon собирается внедрять технологию. Возникают и другие вопросы:

Отсутствие примеров работы технологии выглядит особенно заметно: Amazon пока не опубликовала ни одного фрагмента с её использованием.

Это не первая подобная попытка Amazon Prime Video. В прошлом году сервис запустил экспериментальную функцию дубляжа «с помощью ИИ» для дюжины фильмов и сериалов на английском и испанском языках. Кроме того, компания тестировала созданные ИИ пересказы телесериалов и инструмент, который подбирал рекомендации на основе схожих сюжетных линий и арок персонажей.

Таким образом, Amazon стремится сделать просмотр собственного контента максимально бесшовным.

У дубляжа есть веские причины для использования, особенно для зрителей с ограниченными возможностями. Но идея о том, что речь актёров на другом языке нужно стереть и скрыть, выглядит тревожно: язык становится частью произведения, которую предлагают незаметно заменить.