实测「外部智能」:留给下一个 AI 的失败边界让正确率 1/3 变 3/3

Powerful_Creme2224 · reddit · 2026-08-22

作者在用 Codex 做真实 SOL 工作时观察到一次约 48.35M tokens 输入、其中 98.7% 命中缓存、但周配额只动了 1% 的现象,但他明确不将其归因为因果。

他更关注的是自己长期实践的工作法——External Intelligence(外部智能):把过往失败、决策理由、停止条件、重启点、已发现的边界等信息留在聊天之外(如 Obsidian),由后续 AI 只检索相关部分,例如「这类完成判断以前失败过」「缺这个边界会产生假完成」。

他做了 3 组同快照对照实验(无外部智能 vs 有):

正确完成率 1/3 → 3/3;输入 token 下降但命令执行次数上升。作者的结论很克制:前次 AI 留下的知识在某些匹配场景中确实能改变后续 AI 的决策,不承诺更快或更省 token。他强调强模型不会自动积累「该何时停止、哪些失败该延续到下一次」这类判断,并已在为开源项目提交修复的工作流中使用此方法(目前已有 21 个直接提交)。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →