实测:同一模型换 agent 框架耗时差 3 倍成本差 10 倍
9 月 19 日,作者 @zainhas 发布实测:在完全相同的任务(tbench2.1,全部可解)和同一模型(Kimi K3)下,仅更换 agent harness/框架,就带来巨大差异。他用 5-6 种不同 harness 对比,发现端到端完成时间可相差约 3 倍,成本差距更是高达 10 倍,说明框架本身的效率是评测和部署中不可忽视的变量。
2026-09-19 ~ 2026-09-19 · 2 条相关
- 同模型同任务,不同 harness 成本差 10 倍,作者晒 kimi k3 对比预告 — zainhas · 2026-09-19
- 同一模型换 harness 端到端耗时差 3 倍,6 款框架实测对比 — zainhas · 2026-09-19