实测:同一模型换 agent 框架耗时差 3 倍成本差 10 倍

9 月 19 日,作者 @zainhas 发布实测:在完全相同的任务(tbench2.1,全部可解)和同一模型(Kimi K3)下,仅更换 agent harness/框架,就带来巨大差异。他用 5-6 种不同 harness 对比,发现端到端完成时间可相差约 3 倍,成本差距更是高达 10 倍,说明框架本身的效率是评测和部署中不可忽视的变量。

2026-09-19 ~ 2026-09-19 · 2 条相关