谷歌论文:自改进 agent harness 门控式改写省 10 倍 token 且迁移性更强

omarsar0 · x · 2026-11-18

omarsar0 分享了 Google 关于自改进 agent harness(运行时框架)的新论文《Harnesses That Improve Themselves》。

核心实验:保持 Gemini 3.8 Flash 冻结,让优化器在 SWE-bench Lite 上重写 harness,对比三种方式:

门控方案把 harness 拆成 context、control、tools、verification 四个模块,每轮只改一个,并在 token 上限内用 held-out 任务验证通过后才部署。

迁移性:门控 harness 无需重新搜索即可迁移到 Gemini 4 Argon,解决率 37.5%,优于整体重写的 30.0%。

作者提示:held-out 测试集仅 40 个 issue,数字应视为方向性参考。论文还系统列出了 harness 自改写中的失败模式(prompt 膨胀、benchmark 作弊、evaluator 篡改等)及防御措施。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →