Microsoft тестирует Copilot Vision, который «увидит» экран и приложения на компьютере

Microsoft начала тестирование значительного обновления своего ИИ-помощника Copilot для Windows, которое позволит ему анализировать изображение экрана компьютера и интерфейс запущенных приложений. 

Первоначально функция Copilot Vision была ограничена браузером Edge, но теперь ее возможности расширяются на любое приложение, запущенное на ПК. Это открывает новые горизонты для взаимодействия пользователя с искусственным интеллектом.

Что умеет Copilot Vision?

Благодаря новой функции Copilot сможет помочь пользователям разобраться в работе сложных программ, таких как Adobe Photoshop, анализировать фотографии или веб-страницы, которые они просматривают. На недавнем мероприятии, посвященном 50-летию Microsoft, было продемонстрировано, как ассистент помогает играть в Minecraft и оптимизировать настройки в видеоредакторе Clipchamp.

Кроме того, Copilot сможет подсвечивать определенные элементы интерфейса, чтобы помочь пользователю сориентироваться в незнакомой программе. Это отчасти напоминает функцию Recall, которая делает снимки экрана для последующего поиска, и отчасти – демонстрацию экрана через Microsoft Teams.

ИИ-поиск файлов

Помимо Copilot Vision, в Copilot для Windows также началось тестирование ИИ-поиска файлов. Эта функция позволяет пользователям задавать помощнику вопросы о содержимом файлов в форматах .DOCX, .XLSX, .PPTX, .TXT, .PDF и .JSON.

Доступность

На данный момент протестировать предварительную версию Copilot Vision на ПК могут только участники программы Windows Insider из Соединенных Штатов. Однако, как отмечается, обе новые функции (Copilot Vision и ИИ-поиск файлов) будут доступны для всех ПК с Copilot для Windows, а не только для устройств Copilot Plus PC.

Важно отметить, что функция Copilot Vision уже доступна в мобильных приложениях для iOS и Android. Microsoft планирует сделать эту функцию общедоступной для пользователей Windows в течение ближайших недель или месяцев.

Это обновление является значительным шагом в развитии интеграции искусственного интеллекта в операционную систему Windows, делая взаимодействие с компьютером более интуитивным и эффективным.

theverge.com
Павлик Александр

Источник: ru.gecid.com

0 0 голоса
Рейтинг новости
1
0
Подписаться
Уведомить о
0 комментариев
Межтекстовые Отзывы
Посмотреть все комментарии