OpenAI увеличила количество приложений, с которыми могут взаимодействовать её настольные приложения, включая поддержку Advanced Voice Mode в других приложениях, приближая ChatGPT к более активному использованию на компьютерах. Настольное приложение представило интеграции в ноябре с первыми четырьмя приложениями. Во время 11-го дня своего мероприятия «12 дней OpenAI» компания OpenAI объявила о нескольких новых интегрированных средах разработки IDE, терминалах и текстовых приложениях, которые она будет поддерживать.
Теперь ChatGPT поддерживает BBEdit, MatLab, Nova, Script Editor, TextMate как IDE, а также VS Code для VSCode Insiders, VSCodium, Cursor, WindSurf и семейство IDE JetBrains, включая Android Studio, AppCode, CLion, DataGrip, GoLand, IntelliJ IDEA, PHPStorm, PyCharm, RubyMine, RustRover и WebStorm. Добавлены терминальные приложения Warp и Prompt, они присоединяются к уже поддерживаемым VS Code, Xcode, Terminal, iTerm 2 и TextEdit.
Приложения для кода не единственные, к которым могут получить доступ настольные приложения ChatGPT. OpenAI также добавила интеграции с Apple Notes, Notion и Quip, где Advanced Voice Mode может использовать контекст проектов. Пользователи должны предоставить разрешение ChatGPT для доступа к этим приложениям. Интеграция с чат-ботами на базе ИИ не является чем-то новым. В октябре GitHub Copilot добавила интеграцию платформ кодирования. Подключение приложений к ChatGPT или Copilot переносит контекст с этих платформ в чат. Разработчики могут запросить у ChatGPT помощь с кодом для своего проекта на VS Code, и чат-бот поймёт, над чем они работают.
Кевин Вайль, директор по продуктам OpenAI, заявил в прямом эфире, что улучшение настольного приложения поможет компании приблизиться к более агентному пользовательскому опыту для ChatGPT. Он отметил, что настольные приложения играют большую роль в этой трансформации. Будучи приложением для рабочего стола, можно делать гораздо больше, чем просто вкладка браузера, включая возможность видеть, что находится на экране, и автоматизировать работу с разрешением пользователя. OpenAI планирует больше рассказать об этом, когда наступит 2025 год. Если OpenAI позволит ChatGPT «видеть» больше возможностей компьютера, тогда модель приблизится к функции Claude Computer Use от Anthropic, которая позволяет Claude работать на компьютере пользователя. OpenAI уже анонсировала подобную функцию для мобильной версии ChatGPT, хотя чат-бот пока не может получить доступ к компьютерам или телефонам таким образом. Пользователи могут делиться своими экранами с чат-ботом, чтобы он мог видеть, что они читают или смотрят. Microsoft и Google также разработали сопоставимые функции с Copilot Vision и Project Astra.
На MacOS пользователи могут открыть ChatGPT во время использования других приложений с помощью «option + пробел», чтобы выбрать нужное приложение. Другое сочетание клавиш, «option + shift + 1», открывает самое верхнее используемое приложение. Из этого окна можно получить доступ к Advanced Voice Mode. Интеграции доступны для пользователей ChatGPT Plus, Pro, Team, Enterprise и Edu, но подписчики Enterprise и Edu должны попросить своих ИТ-администраторов включить эту функцию.
Источник: habr.com