Microsoft начала тестирование значительного обновления своего ИИ-помощника Copilot для Windows, которое позволит ему анализировать изображение экрана компьютера и интерфейс запущенных приложений.
Первоначально функция Copilot Vision была ограничена браузером Edge, но теперь ее возможности расширяются на любое приложение, запущенное на ПК. Это открывает новые горизонты для взаимодействия пользователя с искусственным интеллектом.
Что умеет Copilot Vision?
Благодаря новой функции Copilot сможет помочь пользователям разобраться в работе сложных программ, таких как Adobe Photoshop, анализировать фотографии или веб-страницы, которые они просматривают. На недавнем мероприятии, посвященном 50-летию Microsoft, было продемонстрировано, как ассистент помогает играть в Minecraft и оптимизировать настройки в видеоредакторе Clipchamp.
Кроме того, Copilot сможет подсвечивать определенные элементы интерфейса, чтобы помочь пользователю сориентироваться в незнакомой программе. Это отчасти напоминает функцию Recall, которая делает снимки экрана для последующего поиска, и отчасти – демонстрацию экрана через Microsoft Teams.
ИИ-поиск файлов
Помимо Copilot Vision, в Copilot для Windows также началось тестирование ИИ-поиска файлов. Эта функция позволяет пользователям задавать помощнику вопросы о содержимом файлов в форматах .DOCX, .XLSX, .PPTX, .TXT, .PDF и .JSON.
Доступность
На данный момент протестировать предварительную версию Copilot Vision на ПК могут только участники программы Windows Insider из Соединенных Штатов. Однако, как отмечается, обе новые функции (Copilot Vision и ИИ-поиск файлов) будут доступны для всех ПК с Copilot для Windows, а не только для устройств Copilot Plus PC.
Важно отметить, что функция Copilot Vision уже доступна в мобильных приложениях для iOS и Android. Microsoft планирует сделать эту функцию общедоступной для пользователей Windows в течение ближайших недель или месяцев.
Это обновление является значительным шагом в развитии интеграции искусственного интеллекта в операционную систему Windows, делая взаимодействие с компьютером более интуитивным и эффективным.
theverge.com
Павлик Александр
Источник: ru.gecid.com