В 2023 году Brilliant Labs представила проект умного монокля со встроенным ChatGPT за $299. Теперь компания презентовала умные очки Frame AI, которые, как обещают разработчики, раскроют мультимодальные «сверхспособности ИИ». Устройство будет стоить $349.
Frame AI работают на платформе с открытым исходным кодом на базе Python и могут подключаться к сервисам искусственного интеллекта от OpenAI и Perplexity благодаря специальному приложению Noa. Оно же обеспечивает совместимость с моноклем от Brilliant Labs.
Камера на очках распознаёт то, что видит пользователь, и оперирует этой информацией при выполнении запросов. Устройство может выполнять поиск в Интернете, переводить текст, рассчитывать объём калорий и даже генерировать картинки. Встроенные микрофоны и динамики также могут переводить разговоры.
Дисплей очков представляет собой микро-OLED, «связанный» с геометрической призмой в объективе. Хотя в промо-роликах контент отображается по всему объективу, в описании устройства уточняется, что дисплей отображается только в поле обзора по диагонали 20 градусов.
Устройство весит чуть менее 40 г. IPD (межзрачковое расстояние) составляет 58–72 мм.
Для питания используются две батареи, расположенные на задней стороне устройства и заряжаемые с помощью зарядки Mister Power, которая подключается под переносицей. При обычном режиме использования очки могут работать от аккумулятора в течение всего дня.
Brilliant Labs открыла предварительные заказы на Frame, а их поставки начнутся в апреле. Доступны три цвета — дымчатый чёрный, холодный серый и прозрачная версия.
Компания отмечает, что будет предлагать услуги искусственного интеллекта с ежедневным лимитом, а позднее сообщит об условиях платной подписки.
Код Frame и файлы дизайна опубликованы на Github.
Монокль Brilliant Labs стал продуктом разработки студента факультета информатики и электротехники Стэнфорда Брайана Хау-Пинг Чанга. Он смог встроить чат-бота ChatGPT на базе GPT-4 в умные очки благодаря аппаратному обеспечению Monocle AR с открытым исходным кодом и автоматическому распознаванию речи (ASR) Whisper от OpenAI.
Источник: habr.com
