OpenAI добавила в Codex слежение за экраном

OpenAI добавила в приложение Codex для macOS новую функцию Chronicle, которая отслеживает действия пользователя на экране и создаёт на их основе контекстную память. Она доступна подписчикам Pro в режиме предварительного доступа. Функция позволяет инструменту для программирования точнее понимать запросы, учитывая открытые документы, применяемые инструменты и общий контекст работы.

Chronicle работает в фоновом режиме. ИИ-агенты периодически делают снимки экрана, преобразуют их в краткие текстовые сводки и сохраняют локально на компьютере пользователя. Сами записи экрана автоматически удаляются через 6 часов. Таким образом, история действий хранится в виде компактных файлов, а не объёмных скриншотов, что снижает нагрузку на хранилище.

Благодаря Chronicle Codex способен лучше понимать, что именно имеет в виду пользователь при постановке задачи. Если разработчик ссылается на конкретный документ или инструмент, агент уже знает о нём из накопленной памяти и не требует дополнительных пояснений. Это сокращает время на ввод контекста и ускоряет выполнение повторяющихся задач в рамках длительных рабочих сессий.

OpenAI предупреждает, что Chronicle активно расходует лимиты запросов. Пользователи могут приостановить или полностью отключить функцию в настройках приложения в любой момент. Ранее OpenAI выпустила приложение Codex с фокусом на автономном выполнении задач разработки, постепенно наращивая его возможности контекстного понимания.

Функция наблюдения за экраном отражает общую тенденцию к расширению контекстной осведомлённости инструментов на базе искусственного интеллекта. Для разработчиков, занятых созданием сайтов и приложений, подобные решения сокращают необходимость вручную описывать текущее состояние работы и ускоряют переход между задачами в рамках длительных сессий без потери накопленного контекста.