同一模型换 harness 端到端耗时差 3 倍,6 款框架实测对比
zainhas · x · 2026-09-19
- 作者 @zainhas 实测发现:仅更换 agent harness,同一模型完成任务的端到端时间可差约 3 倍。
- 实验设置:6 种不同 harness,统一使用 Kimi K3 模型,跑 Terminal Bench 2.1 的同一组 12 个任务,全部任务均被解决(已饱和),因此对比焦点是速度而非成功率。
- 结论:harness 的工程实现对 agent 实际效率影响巨大,选型时性能差异不可忽视。
所属事件:实测：同一模型换 agent 框架耗时差 3 倍成本差 10 倍(2 条相关)→
「编程与Agent」频道最新
- 免费课程：生成式媒体 Agent 的四大生产难题与解法 — Al_Grigor · 2026-11-04
- 额度重置夜：Codex 恢复 100%，Claude 仅剩 10% — rudrank · 2026-11-04
- 自我改进软件不可避免：让应用读取自身信号并自动修复 — bibryam · 2026-11-04
- 攒 7 卡 132GB 显存本地推理机：EPYC 整合还是双平台？ — infectiousstupidity · 2026-11-04
- 50 人 12 国团队:创始人自称与 AI Agent 沟通多过与同事 — Scobleizer · 2026-11-04
- 极简 agent 框架 Pi 发布：四种模式可扩展，附音乐软件语音操控案例 — solyarisoftware · 2026-11-04