Flawless AI использовала свою технологию для изменения движений губ актёров в шведском фильме «Смотри на небо».
Flawless AI
9мая в кинотеатрах AMC Theatres начнётся показ научно‑фантастического фильма на шведском языке. При этом выглядеть он будет так, словно снят на английском. «Смотри на небо» подвергся «визуальному дубляжу» с помощью искусственного интеллекта. Компания Flawless AI, которая занимается разработкой искусственного интеллекта, использовала свою технологию для цифрового изменения изображений в фильме, благодаря чему мимика актёров выглядела так, будто они действительно говорят по‑английски. Примечательно, что в оригинале актёры записывали свои диалоги на английском языке в звуковой кабине — технология Flawless AI просто изменила движения их губ в фильме.
На своём сайте Flawless заявляет, что её технология TrueSync AI «улавливает каждый нюанс игры актёра и генерирует новые движения губ, которые идеально соответствуют новому языковому звуку, обеспечивая идеальный визуальный дубляж». Variety утверждает, что инструмент соответствует правилам, установленным SAG‑AFTRA, которая прекратила 4-месячную забастовку в 2023 году после заключения сделки со студиями, которая защищает участников «от угрозы ИИ».
«Смотри на небо» — это история девушки‑подростка, которая верит, что ее пропавший отец не умер, а был похищен инопланетянами. Чтобы узнать правду об исчезновении отца, она объединяется с UFO Club, чтобы найти его. AMC Theatres обязались показать фильм в 100 местах по всей Америке.
Как это меняет мир
Технология Flawless AI может популяризировать зарубежные фильмы. Сделать их более привлекательными для зрителей, которые не хотят смотреть фильмы с субтитрами, и может обеспечить лучший опыт для зрителей в странах, где обычно дублируют фильмы на родном языке.
Этот прецедент — отличный повод подумать о будущем киноиндустрии. Ведь ИИ — это не только фейковые губы. Все мы помним кейс российских разработчиков, когда для сериала «Диверсант. Идеальный штурм» с помощью нейросетей «оживили» актёра Владислава Галкина, создав его полнофункциональную цифровую модель. Подобные технологии в потенциале способны решить много задач — от омоложения лиц или синтеза голоса до создания 3D‑моделей городов.
В конечном счёте всё это способствует увеличению производительности и выходу на более предпочтительные даты премьер. А значит, разработчики смогут реализовать множество интересных проектов, повлияв на видео‑ и аудиоряд. Мощные GPU станут идеальной платформой для обучения таких «киношных» нейросетей.
Главное — не заиграться. Этические вопросы и неспособность ИИ улавливать тонкие эмоции должны служить сдерживающими факторами. Иначе любимый многими кинематограф превратится в пластмассовый мир, где нет места человеческому творчеству.
Спасибо за внимание. Ваш Cloud4Y. Читайте нас здесь или в Telegram‑канале!
Источник: habr.com