「Harness 税」实锤：同样 15 轮，Claude Code 成本是 Pi 的两倍
HamelHusain · x · 2026-09-17
Melissa Pan 对智能体框架的成本差异做了量化分析，转发自 Hamel Husain：在 SWE-bench Lite 上，Pi 与 Claude Code 运行 Fable 5 的平均轮次几乎相同（15.4 vs 15.3），但 Claude Code 成本约是 Pi 的两倍，换来的成功率提升仅 1.1 个百分点。
关键发现：
- 差异可从第一次模型调用观察到：Claude Code 的初始上下文平均超过 Pi 的 10 倍，指令更长、工具 schema 更大
- 这解释了「harness tax」（框架开销税）的来源——脚手架本身吃掉大量 token
- 作者主张：随着模型能力增强，agent 需要的脚手架会减少，harness 设计应优先考虑成本效率与可靠性
对正在选型或自建 agent 框架的团队有直接参考价值：框架的开销可能比模型本身更烧钱。
所属事件:7模型×3套编码harness实测：影响成本远大于成功率(7 条相关)→
「编程与Agent」频道最新
- Google 开源内部「大象-金鱼」工作流:规划与审查分离防 AI 敷衍 — gaganghotra_ · 2026-11-02
- InfoQ 发文：Agentic AI 架构中记忆、知识与上下文的系统化方法 — AdiPolak · 2026-11-02
- Harness Pro 用 ESP32-P4 做出 AI 编码 Agent 桌面监控屏 — dee_hw · 2026-11-02
- RL 训练 LFM2.5-24B 适配器：精度持平下工具调用省 20% — yb2698 · 2026-11-02
- Agent 生产环境排障之痛：错误在第5步、根因在第3步 — Ok-Machine7983 · 2026-11-02
- RAGFlow 1.0 预览：从 RAG 引擎转向 agent 原生数据库 — newpeak · 2026-11-02