Ни для кого не секрет, что компания OpenAI в последнее время сталкивается с серьёзной конкуренцией со стороны Anthropic, которая сделала акцент на сервисах для программирования и начала даже доминировать в этом направлении. Чтобы исправить положение, OpenAI вчера, 16 апреля, выпустила крупный апдейт для инструмента Codex, существенно расширив возможности утилиты. Например, теперь система может работать в фоновом режиме, используя все приложения на компьютере пользователя для выполнения поставленной задачи. Со стороны это выглядит так, как будто пользователь всё делает сам. Telegram-канал создателя Трешбокса про технологии Видео: OpenAI
Инструмент на базе искусственного интеллекта может «видеть» то, что происходит на экране компьютера, кликать виртуальным курсором по нужным кнопкам, иконкам и меню, вводить текстовые команды и многое другое. Более того, запускать можно не одного ИИ-агента, а сразу нескольких.«Несколько агентов могут работать на вашем Mac параллельно, не мешая вашей работе в других приложениях. Для разработчиков это крайне полезно в процессе внесения изменений в интерфейс софта, тестировании приложений и в процессе выполнения иных типов задач», — объяснили представители OpenAI в блоге.
Кроме того, OpenAI встроила браузер в ИИ-инструмент Codex — теперь пользователь может просмотреть страницу, а затем оставить искусственному интеллекту комментарии-инструкции, следуя которым, система будет вносить изменения. В компании считают, что это крайне полезная фича для фронтэнд-разработки и разработки игр, плюс со временем представители американского гиганта планируют расширить возможности этой функции, чтобы Codex мог полностью управлять браузером не только в веб-приложениях на локальном компьютере пользователя.
Также Codex теперь может использовать генеративную модель gpt-image-1.5 для генерации и интерактивной обработки изображений. Это позволяет достаточно быстро создавать визуальные концепции конечного продукта, дизайн интерфейса, макеты и даже игры в рамках единого рабочего процесса. И так как всё вышеперечисленное явно нацелено в том числе на корпоративный сектор, OpenAI выпустила свыше 90 дополнительных плагинов для интеграции с популярными приложениями и MCP-серверами.
Правда, стоит отметить, что все вышеперечисленные нововведения пока что доступны исключительно на операционной системе macOS — в официальном пресс-релизе информация о планах по реализации тех же инноваций на других ОС отсутствует.
Источник: trashbox.ru