OpenAI запускает Computer History — новую систему, которая позволяет ChatGPT и Codex учитывать недавнюю активность пользователя на компьютере. Она пришла на смену исследовательскому прототипу Chronicle. Систему переработали.
Главное техническое отличие — способ сбора данных. Chronicle использовал снимки экрана, тогда как Computer History работает с потоком событий взаимодействия: фиксирует клики, ввод текста, сочетания клавиш, переключение между приложениями и другие события, которые macOS предоставляет через систему специальных возможностей. При этом функция не делает скриншоты и не записывает экран или аудио. Активность в приватном режиме браузера также не включается в историю.
Собранные события объединяются в хронологию и периодически преобразуются в текстовые сводки и локальные файлы памяти. Можно просматривать историю, удалять отдельные записи и приостанавливать сбор данных. Также можно самостоятельно выбрать, какие приложения и сайты учитывать, а какие исключить.
ChatGPT может использовать систему ещё и как контекст для будущих запросов. Например, пользователь может спросить, чем занимался до перерыва, найти недавно открытый документ или получить сводку своей работы за день. При необходимости ChatGPT или Codex могут использовать историю, чтобы определить нужный файл, переписку или другой источник, а затем обратиться непосредственно к нему.
Еще одна функция — поиск повторяющихся рабочих процессов. Если Computer History обнаруживает, что пользователь регулярно выполняет одну и ту же последовательность действий, система может предложить превратить её в skill или автоматизацию. Такие повторяющиеся воркфлоу затем можно передать Codex для создания соответствующего сценария.
Функция доступна в десктопном ChatGPT для macOS на тарифах Pro, Business и Enterprise. На момент написания Computer History не работает в Европейской экономической зоне, Великобритании и Швейцарии.
По умолчанию Computer History отключена. Для пользователей ChatGPT Pro достаточно самостоятельно включить ее в настройках. В Business и Enterprise доступ сначала должен разрешить администратор рабочего пространства, после чего каждый сотрудник все равно самостоятельно решает, включать функцию или нет. Для работы Computer History также требуется включенная функция Memories.
По сути, история взаимодействия с компьютером превращается в новый слой контекста для ChatGPT: модель получает возможность учитывать не только содержание текущего диалога, но и то, что пользователь недавно делал в других приложениях и на каких сайтах работал. При этом сама система пока ограничивается событиями взаимодействия, а не непрерывным наблюдением за экраном.
Источник: habr.com