Специалисты из Вашингтонского университета разработали прототип беспроводных наушников VueBuds со встроенными миниатюрными камерами. Новая система позволяет пользователю общаться с искусственным интеллектом о том, что он видит перед собой. Например, можно навести наушники на упаковку еды и попросить ИИ перевести текст — ответ прозвучит прямо в наушниках, пишет Tech Xplore.
Камеры размером с рисовое зерно делают черно-белые снимки низкого разрешения и по Bluetooth отправляют их на смартфон или другое устройство. Небольшая модель искусственного интеллекта, работающая непосредственно на устройстве, анализирует изображение и отвечает на вопросы примерно за секунду. Вся обработка данных происходит локально, что обеспечивает высокий уровень конфиденциальности: изображения можно удалить сразу после использования, а индикатор показывает, когда ведется запись.
В отличие от умных очков или VR-гарнитур, наушники уже стали привычным аксессуаром для большинства людей. Это решает проблему социального принятия и опасений по поводу приватности. Чтобы минимизировать расход батареи и нагрузку на передачу данных, команда отказалась от видео в пользу статичных изображений низкого качества.
Особое внимание уделили расположению камер: их разместили под углом 5−10° наружу, что обеспечивает широкий угол обзора (98−108°) и минимизирует «слепые зоны». Для ускорения работы ИИ система «сшивает» два изображения с камер в одно, что позволяет отвечать практически в реальном времени.
В испытаниях с участием 74 человек VueBuds показали точность перевода и распознавания объектов на уровне 83−84%, а при определении автора и названия книги — 93%. Пользователи отметили удобство и скорость работы системы, хотя для задач, связанных с цветом, текущая версия не подходит. В будущем команда планирует добавить цветные камеры и обучить специализированные ИИ-модели для помощи людям с нарушениями зрения и путешественникам.
Тем временем Razer выпустила «безупречные» геймерские наушники Hammerhead V3 HyperSpeed. Водонепроницаемая конструкция, звук без задержек на частоте 2,4 ГГц и возможность подключения к смартфонам, планшетам, ПК, Steam Deck и даже PlayStation 5 — подробнее о всех функциях рассказали в другом материале Hi-Tech Mail.
Источник: hi-tech.mail.ru