В октябре 2024 года Microsoft представила в браузере Edge функцию Copilot Vision, которая анализирует содержание веб-страниц и отвечает на вопросы по нему, либо позволяет производить другие действия. Она была доступна только подписчикам Copilot Pro, но теперь заработала для всех пользователей Edge бесплатно.
Copilot Vision работает только с некоторыми веб-сайтами, включая Amazon.com, Target.com, Wikipedia и Tripadvisor. Функция не будет работать на веб-сайтах с платным доступом или конфиденциальным контентом.
Microsoft заявляла, что не хранит и не использует какие-либо данные из Copilot Vision — будь то аудио, изображения, текст или разговоры — для обучения своих моделей.
Ранее в этом месяце компания объявила о расширении работы функции в мобильных приложениях и сервисах Windows. Используя мобильное приложение Copilot, пользователи могут направлять камеру своего телефона на интересующий объект и запрашивать информацию о нём. Copilot может анализировать как видео с камеры в реальном времени, так и фотографии, хранящиеся в галерее телефона.
Новое приложение Copilot для Windows также поддерживает Copilot Vision, но пока функция доступна для участников программы предварительной оценки. На основе отзывов пользователей Microsoft планирует со временем расширить доступ к ней. Как только функция станет широкодоступной, пользователи смогут поделиться любым окном браузера или приложения с Copilot и получить ответы на свои вопросы.
Чтобы использовать Copilot Vision в Windows, нужно щёлкнуть значок очков на панели приложения Copilot, выбрать окно браузера или приложение, которым нужно поделиться, и задать вопрос.
Источник: habr.com