dottxt 发布工具调用指数:同一模型不同供应商坏调用量差 19 倍
dottxt 上线 Tool-call Index(providers.dottxt.ai),追踪各模型在不同推理供应商上的工具调用损坏率。核心发现是「供应商和模型一样重要」:同一模型部署在不同供应商上,最差供应商的坏调用量可达最好供应商的 19 倍。以 ERNIE-5.5-Flash-Preview 上线周(11 月 10–17)为例,各家供应商的损坏率在 0.74% 到 1.20% 之间,显示选择推理提供商对实际效果影响显著。
2026-11-20 ~ 2026-11-20 · 3 条相关
- dottxt 工具调用指数:ERNIE-5.5 各家供应商损坏率 0.74%~1.20% — remilouf · 2026-11-20
- dottxt 工具调用指数:同一模型最差供应商坏调用量可达最好的19倍 — remilouf · 2026-11-20
- 最差推理商工具调用失败率高 19 倍,dottxt 发布提供商质量索引 — remilouf · 2026-11-20