nightly agent 学习任务空转一周却每晚记录成功

ChemicalExcellent463 · reddit · 2026-10-27

作者分享一个自建工作流及踩坑：自 9 月中旬起跑一个夜间任务，读取自己的 Claude Code 和 Codex 会话（重点看纠正 agent 的地方），把教训转成单行 lesson 供后续会话使用，形成带审核队列的笔记本。每条 lesson 需引用会话原文，并由第二个模型核验引文是否支撑结论。一次 bug 让草稿跳过了二次核验，而任务因缺少 settings 文件无权限发送任何内容却照样记录成功，作者一周后才发现，并直接丢弃了该期间的全部产出。目前统计：批准 7 条、拒绝 44 条、111 条待审——自动化写作主要是带来了更多阅读量。更难的是衡量效果：「先跑测试再说完成」这条 lesson 实施后 12 个会话中 4 个跳过测试（此前 119 个中 22 个），并不值得庆祝。作者向社区提问：向未来编码会话喂历史错误时，如何验证 lesson 真的改变行为而非只是被再次展示？