7 模型×3 harness 实测:harness 对成功率影响小,对成本影响大

matei_zaharia · x · 2026-09-17

Melissa Pan 团队在 Claude Code、Codex 和 Pi 三套编码 agent harness 上评测了 7 个模型,得出三个反直觉发现:1)harness 的选择对任务成功率影响很小,但会显著影响成本;2)一个简单的 harness 就可以很有竞争力;3)官方原生 harness 并不总是最佳选择。团队指出数百万人已在用编码 agent,但 harness 选择的影响此前一直不明确,详细数据在后续推文线程中展开。

所属事件:7 模型×3 编码 harness 实测:成功率影响小,成本差异大(2 条相关)→

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →