实测大小模型路由:小 harness 下决策模型反更贵

yb2698 · x · 2026-10-23

作者实验验证「用决策模型逐轮判断是否把查询路由到更便宜的小模型」这一社区思路:大模型用 Qwen3.5-27B(配 vLLM d3 作决策模型,可路由到 Qwen3.5-9B),harness 分别测试 ipython、Pi、Claude Code 与 Qwen-Code,小模型侧用纯 ipython。实验从 TB-Lite 采样 10 个困难任务,每任务重复 3 次。

所属事件:实测大模型路由小模型省钱:小harness成本反升30%-89%(5 条相关)→

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →