OpenAI выпустила Computer History — функцию, которая отслеживает активность пользователя на Mac и превращает её в поисковую хронику, которую ChatGPT и Codex могут использовать как контекст. Это замена прежней исследовательской версии Chronicle, которая полагалась на скриншоты. Computer History работает иначе: вместо захвата изображения экрана она записывает события взаимодействия — клики, нажатия клавиш, сочетания клавиш и переключения приложений, считывая их через систему специальных возможностей macOS.

Собранные события периодически преобразуются в текстовые сводки и сохраняются локально в виде Markdown-файлов. Временные файлы событий хранятся в группе приложений ChatGPT на Mac и удаляются через 48 часов. Однако сгенерированные файлы памяти остаются в виде обычного текста на локальной файловой системе до тех пор, пока пользователь не удалит их вручную. OpenAI подчёркивает, что эти файлы не зашифрованы, поэтому любая программа, работающая под той же учётной записью macOS, потенциально может их прочитать. Для создания воспоминаний OpenAI обрабатывает временные файлы на своих серверах, но утверждает, что не хранит их после обработки, если это не требуется по закону. Файлы не используются для обучения ИИ, однако, когда воспоминания попадают в контекст последующих чатов, содержимое этих чатов может стать данными для обучения в зависимости от настроек контроля данных пользователя.

Ключевая особенность Computer History — способность выявлять повторяющиеся рабочие процессы. Когда ChatGPT обнаруживает повторяемые шаблоны в активности пользователя, хронология предлагает «навык» (Skill) или автоматизацию. Пользователь может попросить Codex создать переиспользуемый шаблон на основе записанного процесса. Типичные сценарии — поиск недавно отредактированных документов или генерация сводок для стендапов. ChatGPT может использовать записанную активность, чтобы найти нужный источник и обратиться к нему напрямую.

События преобразуются в текстовые сводки и хранятся локально в виде Markdown-файлов, не зашифрованных.

Image description
Image description · Источник: The Decoder

OpenAI встроила многоуровневую систему разрешений. В рабочих пространствах Business и Enterprise администратор должен явно включить функцию, но этого недостаточно: каждый пользователь должен дать индивидуальное согласие. Также должна быть включена функция Memories. Пользователи могут управлять тем, какие приложения и сайты предоставляют данные, через списки включения и исключения, а запись можно приостановить или возобновить в любой момент из строки меню macOS. Функция пока недоступна в Европейской экономической зоне, Швейцарии и Великобритании.

OpenAI предупреждает о повышенном риске prompt injection. Поскольку Computer History захватывает контент из приложений и веб-сайтов, вредоносные инструкции, встроенные в веб-страницу, могут обманом заставить ChatGPT или Codex следовать им. OpenAI также рекомендует не использовать функцию с приложениями для общения, если все участники разговора не дали явного согласия. Для приложений, работающих с чувствительными данными о здоровье, финансах или личной информацией, рекомендуется приостановить запись или исключить такие приложения полностью.