Создатели научно-фантастического фильма Миссия «НЛО» использовали технику TrueSync, также известную как «визуальный дубляж». Изначально картина была снята на шведском языке, но новая ИИ-технология поможет адаптировать движения губ актеров под английский дубляж. В результате игра актеров смотрится более естественно. При этом создателям не потребовалось переснимать ни одной сцены.
Новая технология TrueSync предоставлена ИИ-компанией Flawless из Лос-Анджелеса. Она анализирует игру актера, используя глубокое обучение для создания объемного 3D-представления его лица. Затем нейросеть адаптирует движения его рта в кадре на этапе постпроизводства.
Технология существует уже несколько лет. Ранее она использовалась для маскировки нецензурных слов, чтобы адаптировать кинопродукцию для телеэкрана.
Так, например, TrueSync помог заменить 35 ругательств на менее оскорбительные фразы в фильме «Вышка», при этом не пришлось переснимать ни одной сцены.
На этот раз технология Flawless используется для визуального дубляжа целого фильма. Фильм «Смотри в небо», дебютировавший на родине в 2022 году под названием UFO Sweden, рассказывает о девушке, которая ищет своего пропавшего (возможно, похищенного инопланетянами) отца в клубе наблюдателей НЛО. Оригинальные актеры дублировали свои выступления на английский язык в студии звукозаписи, так что их шведский акцент остался нетронутым.
Технология также использует систему управления правами – она гарантирует, что редактирование с помощью искусственного интеллекта осуществляется только с согласия исполнителей. TrueSync помогает сэкономить до 50% затрат на переделку сцен для дубляжа по сравнению с их повторной съемкой.
