Codex新增Chronicle功能可截屏桌面,OpenAI提醒:敏感场景需暂停

5分钟前

Codex,正实时捕捉你的屏幕


近日,OpenAI为Codex推出了一项名为Chronicle的新功能。


该功能会在后台自动截取屏幕画面并转化为记忆,当你再次打开Codex时,能直接衔接之前的操作场景。



上周Codex刚上线memories功能,让智能体从对话历史中学习;本周Chronicle更进一步,实现了从屏幕内容中学习。


奥特曼将其称为“心灵感应”般的体验。



这种多模态上下文能力,也是OpenAI率先探索的方向。


借助屏幕截图强化上下文理解


OpenAI对Chronicle的描述是,它能让Codex理解你口中的“这个”“那个”等模糊指代。


比如屏幕上的报错提示、打开的文档,或是“两周前你处理的那个项目”。


以往与Codex交流时,它无法理解这些模糊表述,你需要重新粘贴背景信息、截取报错图或翻找历史聊天记录。


Chronicle消除了这种沟通障碍。长期使用后,它还能记住你常用的工具、反复查看的项目及依赖的工作流程。


例如,当你问“为什么这个操作失败了”,以前Codex只能回复“不清楚你所指内容”。



现在,Chronicle可通过之前的屏幕截图,推断出你模糊指令的具体指向。



OpenAI总裁Greg Brockman的表述更直接:


“这是一项实验性功能,让Codex能看到并记住你最近浏览的内容,自动获取你当前工作的完整上下文,使用起来有种神奇的魔法感。”



其原理并不复杂:后台智能体会周期性截取屏幕截图。


截图不在本地处理,而是上传至OpenAI服务器,经过OCR识别和视觉分析后生成Markdown文字摘要,再回传至本地。


摘要存储在本地目录,下次打开Codex时,会作为上下文载入窗口。


原始截图在本地保留6小时后删除,但Markdown摘要会永久保存,且为明文未加密状态,你可直接打开目录查看、编辑或删除不想保留的内容。


不过,Chronicle并非总是直接使用截图摘要作为答案。


OpenAI在文档中明确说明:若存在更合适的信息源(如具体文件、Slack消息、Google文档、仪表盘或拉取请求),Codex会通过Chronicle识别该源,然后直接读取源内容。


Chronicle更像是索引,而非直接的答案库。


使用方法很简单:打开Codex设置,进入Personalization页面,先开启Memories,再打开下方的Chronicle,授权macOS的屏幕录制和辅助功能权限即可启用。


目前该功能处于可选的研究预览阶段,仅向每月100美元的ChatGPT Pro订阅用户开放,且仅支持macOS系统。


AI识别截图是否可靠?


虽然截图接入上下文能让工作流程更顺畅,但开启Chronicle前需了解以下风险。


OpenAI在文档中坦诚列出了三点风险:


一是速率限制消耗快。后台智能体持续将截图转化为摘要的过程,会快速消耗你的使用配额。


二是提示注入风险上升。屏幕上的恶意网页、邮件或文档,可能通过截图向Codex上下文注入恶意指令,你未察觉时,Codex已“看到”。


三是记忆未加密存储在设备上。Markdown文件明文存储于本地,若其他应用有权限访问这些文件,就能读取内容。


OpenAI建议:开会或查看敏感内容前,暂停Chronicle功能。


这一建议略显微妙,相当于承认Chronicle可能捕捉到不应捕捉的内容,却将“记得暂停”的责任交给了用户。


在桌面屏幕感知领域,OpenAI并非首个尝试者。



微软的Recall功能早在2024年就有类似构想,却引发全网争议。2026年初,安全研究员演示了攻破Recall加密数据库的攻击路径,导致Copilot订阅用户半年内减少39%,Recall的负面影响是原因之一。


Rewind AI曾是该赛道的先行者,后更名为Limitless,2025年12月被Meta收购,其Mac应用直接关闭,屏幕捕捉功能也随之下线,Meta显然并非为继续该功能而收购它。


开源替代工具Screenpipe仍在运营,主打本地优先,但操作过于复杂,并非普通用户会选择的工具。


Chronicle采取了相对保守的策略:截图不上云、本地存储、6小时删除、可随时暂停、摘要可人工审查编辑,机制比Recall更透明。


但用户对便捷上下文的需求并未消失。


相关推文下争议较大:一方用户认为这一方向正确,终于无需反复粘贴报错和截图;另一方网友则紧盯“未加密存储”问题,认为能随意截图的智能体令人不安。






毕竟,没人想在摸鱼时被AI“取证”吧?


(有人已经截图了!)


参考链接


[1]https://x.com/OpenAIDevs/status/2046288243768082699


[2]https://developers.openai.com/codex/memories/chronicle


[3]https://9to5mac.com/2026/04/20/codex-for-mac-gains-chronicle-for-enhancing-context-using-recent-screen-content/


本文来自微信公众号“量子位”,作者:关注前沿科技,36氪经授权发布。


本文仅代表作者观点,版权归原创者所有,如需转载请在文中注明来源及作者名字。

免责声明:本文系转载编辑文章,仅作分享之用。如分享内容、图片侵犯到您的版权或非授权发布,请及时与我们联系进行审核处理或删除,您可以发送材料至邮箱:service@tojoy.com