HarnessEvolve 论文:三道闸门修复自进化 Agent 三大失效模式
dair_ai · x · 2026-09-03
dair-ai 推荐了一篇关于自进化 agent 的新论文 HarnessEvolve,指出这类 agent 普遍存在三种失效方式:
- 反馈归因模糊:只有终端层面的反馈,无法确定是哪一步出错。
- 记忆任务模式而非通用能力:agent 记住的是任务特定的模式,没有获得可迁移能力。
- 无守卫的更新静默退化:更新过程会悄悄抹掉 agent 已具备的能力。
HarnessEvolve 用一个闭环同时解决三个问题:
- 信用分配:让 agent 在给定标准答案时生成参考轨迹(reference trajectories),再把失败运行与其对齐,提取错误信号。
- 信号聚类:把错误信号聚类,使更新针对系统性模式而非单次坏 rollout。
- 双闸门:候选 harness 更新需过质量闸(过滤数据泄漏与 prompt 膨胀)和性能闸(仅在当前批次有提升才接受),才会上线到 live agent。
「编程与Agent」频道最新
- 开发者把状态小灯接 Gumloop,实时显示后台 agent 运行状态 — aronkor · 2026-09-03
- Eve 框架主打 agent 开发:一个文件夹,默认持久化运行 — cramforce · 2026-09-03
- 让 Claude 替你登录 Wi-Fi 并优化设置,网友晒 agent 留言板 — scaling01 · 2026-09-03
- Muse Spark 1.3 发布,附一行 curl 命令即可安装 Muse Code — alexandr_wang · 2026-09-03
- xState 作者开 PR:实验性 @xstate/effect 打通 Effect 4 与 XState v6 — DavidKPiano · 2026-09-03
- Anthropic CEO:比单个 agent 内心更该关注的是 agent 间通信可解释性 — robleclerc · 2026-09-03