7 个模型实测:编码 agent 的 harness 不影响成功率却显著影响成本
DavideCrapis · x · 2026-09-17
Melissa Pan 团队将 7 个模型分别在 Claude Code、Codex 和 Pi 三种 harness 上评测,得出三个反直觉发现:
- harness 选择对任务成功率影响很小,但对成本影响显著
- 简单的 harness 也可以很有竞争力
- 模型的“原生 harness”并不总是最佳选择
研究指出,虽然数百万人正在使用编码 agent,但 harness 选择的影响此前一直不明确,这项工作填补了这一空白。
所属事件:7模型×3套编码harness实测:影响成本远大于成功率(7 条相关)→
「编程与Agent」频道最新
- 用 Claude 纯提示词剪完整条视频,视频剪辑师要慌了 — CodeByPoonam · 2026-11-02
- Cohere Labs 智能体团队构建方法降本 70%,兼顾效率 — Cohere_Labs · 2026-11-02
- Ыég especial: 长文析 AI 价值在效率之后:Infra 必然过剩,应用层基建正当时 — yangyi · 2026-11-02
- 开源 offprompt:MCP 服务器让 Agent 请求密钥却永远看不到明文 — Vast_Ad_7338 · 2026-11-02
- Reddit 讨论:把 OOP 公有方法直接变成 AI Agent 可调用的工具 — out_of_nowhere__ · 2026-11-02
- DeepSeek 设计文档:一人只能盯 3-5 个 agent 会话,瓶颈不再是模型 — heyshrutimishra · 2026-11-02