Можно создать свой виртуальный аватар, который будет меняться в реальном времени.
Исследователи Корнеллского университета разработали две технологии, которые отслеживают взгляд и выражение лица человека с помощью датчиков, подобных сонару. Эта технология достаточно миниатюрная, чтобы ее можно было использовать в коммерческих смарт-очках или гарнитурах виртуальной или дополненной реальности. При этом новое решение потребляет намного меньше энергии, чем аналогичные инструменты, использующие камеры, сообщает TechXplore.
Обе технологии задействуют динамики и микрофоны, установленные на оправе очков, чтобы отражать неслышимые звуковые волны от лица и улавливать отраженные сигналы, вызванные движениями лица и глаз. Одно из устройств, GazeTrak, представляет собой первую систему слежения за взглядом, основанную на акустических сигналах. Вторая, EyeEcho, непрерывно и точно распознает выражения лица и воссоздает их с помощью аватара в режиме реального времени.
Устройства могут работать несколько часов от батареи умных очков и более суток от гарнитуры VR.
Для GazeTrak исследователи разместили один динамик и четыре микрофона вокруг внутренней части оправы очков, чтобы отражать и улавливать звуковые волны от глазного яблока и области вокруг глаз. Полученные звуковые сигналы подаются в настроенный конвейер глубокого обучения, который использует искусственный интеллект для непрерывного определения направления взгляда человека.
Источник: hi-tech.mail.ru
