Компания Microsoft разрабатывает технологию на основе искусственного интеллекта, которая позволит изменять речь и мимику людей прямо во время видеотрансляций. Соответствующая патентная заявка описывает систему, способную удалять, заменять и корректировать отдельные слова, одновременно подстраивая движения губ и выражение лица говорящего.
Для работы технология будет использовать ИИ-агентов, которые смогут редактировать аудио и видео практически без задержки. Система также будет обрабатывать соседние фрагменты записи, чтобы изменения не выделялись на фоне оригинальной речи. Настройки можно будет адаптировать под предпочтения конкретного зрителя.
Одним из вариантов применения станет перевод трансляций на другие языки с одновременной заменой речи и движений губ. Кроме того, технология сможет автоматически убирать слова-паразиты, исправлять заикание, ошибки произношения и заменять неуместные выражения. Среди других возможностей упоминается корректировка разговорной речи, включая сленг и региональные особенности произношения.
При этом возможности системы не ограничиваются технической обработкой речи. В патенте говорится, что ИИ сможет самостоятельно подбирать подходящие замены для слов, в том числе с помощью поиска в интернете. Это позволит зрителям получать одну и ту же трансляцию, но с содержанием, изменённым под их личные предпочтения.
Технологию потенциально можно использовать во время лекций, презентаций, спортивных соревнований, телевизионных шоу и других прямых эфиров. Однако такой подход вызывает вопросы о достоверности увиденного. Если система незаметно меняет слова и выражения говорящего, зритель может услышать совсем не то, что человек произнёс на самом деле.
В патенте также упоминается возможность сохранения оригинальных аудио- и видеозаписей для сравнения с обработанной версией. При этом Microsoft пока не сообщила, планирует ли выпускать подобный продукт и когда технология может появиться на рынке. Сам факт подачи патентной заявки ещё не означает, что разработка станет коммерческим продуктом.
Источник: trashbox.ru