OpenRouter 数据:token 质量与价格无关,最贵供应商照样烂工具调用
remilouf · x · 2026-11-13
作者 remilouf 分享了一个反直觉发现:token 质量与成本没有相关性。配套散点图基于 OpenRouter 2026 年 11 月 4 日当周数据(providers.dottxt.ai),横轴为各供应商价格相对该模型中位供应商的倍数,纵轴为损坏工具调用(broken tool calls)相对中位数的倍数:
- 数千个采样点在两个维度上几乎均匀散布,高价供应商并不更可靠
- 极端案例:Alibaba 以约 6 倍中位价提供 GLM 5.3,却同时有约 5 倍的坏调用率,成为「最贵」标注点
- 结论:选 LLM 供应商时按价格筛选质量是无效策略,需直接看可靠性数据
对做多供应商路由、agent 工程选型有直接参考价值。
所属事件:OpenRouter 数据:token 质量与价格无关,工具调用差异悬殊(2 条相关)→
「模型」频道最新
- Claude Fable 5.2 登顶 Code4Scene,还钻了碰撞检测的空子 — Lianhuiq · 2026-11-13
- 社区求实测:Qwen3.8-27B 在 agent 工具调用循环中到底行不行 — MajesticPuzzler · 2026-11-13
- Gemini 4 Hydrogen Flash 现身 Antigravity,Pro 订阅用户可用 — testingcatalog · 2026-11-13
- 实测:ChatGPT 爬虫开始渲染 JavaScript,同一 URL 两种页面 — gaganghotra_ · 2026-11-13
- 斯坦福 HAI 实测:最佳医疗 AI Agent 仅完成不到一半真实临床任务 — StanfordHAI · 2026-11-13
- Figure 发布 Handoff²:准确率逼近前沿模型,任务速度快一倍 — adcock_brett · 2026-11-13