Agent 自查不足信:三级审查法揪出 40% 会话中的关键错误

AI Engineer · youtube · 2026-10-13

Corey Gallon 在 AI Engineer 演讲中提出「我不信 agent 说完成了」的三级审查方法。

失败案例:一封催款函通过了起草 agent 的自检,但两个独立审查 agent 发现所谓「已过期」的合同在三周前刚续约,发出去可能让企业损失数千美元。
作者统计:复盘自己 2026 年的会话,约四成会话存在实质性错误(仅为个人样本,非通用错误率)。
三级审查法:
交付物须带指纹的可验证 artifact,或明确说明缺失内容;
多个独立 agent 对照控制总数抽取同一材料,所有差异回溯源文件——一年扫描账单用此法找出 56 处差异,账目精确到分;
自审 + 带质疑动机的「冷」审查 agent + 修改时换全新 reviewer。一次内存泄漏调查中,该方法在被合并前暴露了错误复现与夸大的修复。
成本与产出:作者公布了各案例的时间与 token 成本,并把方法打包成 agent skills 开源(github.com/captivus/agent-review)。

「编程与Agent」频道最新