最差推理商工具调用失败率高 19 倍,dottxt 发布提供商质量索引
remilouf · x · 2026-11-20
dottxt 上线的 Tool-call Index 显示:推理 provider 的重要性不亚于模型本身——同一模型在不同 provider 上,最差提供商的工具调用失败率可比最好者高约 19 倍(如 gpt-oss-120b 最好 0.01%、最差 71.96%;GLM 5.3 最好 0.01%、最差 17.81%)。索引覆盖 64 个模型、66 个 provider、15 家模型实验室,并附每周报告。
作者 remilouf 还发布了一个 agent skill,让 agent 自己根据该索引选择推理 provider,安装方式:
npx skills add https://providers.dottxt.ai --skill choose-provider
所属事件:dottxt 发布工具调用指数:同一模型不同供应商坏调用量差 19 倍(3 条相关)→
「编程与Agent」频道最新
- llms.txt 协议两年普及:Google Antigravity 等产品开始采用 — jeremyphoward · 2026-11-22
- 他为戒掉刷 X 做「只有 Agent 能看」的信息流:无 UI、按语义匹配 — imdogefather · 2026-11-22
- Claude Code 上线实验性 Code Mode:让 AI 写代码串工具省上下文 — lxfater · 2026-11-22
- ClaudeAI 周报:单 HTML 文件游戏军备赛与 89 亿 token 草莓名场面 — ClaudeAI-mod-bot · 2026-11-22
- Agno AgentOS 开源运行时:一键把 Agent 变成带 MCP 的生产级 API — pritisinghhhh · 2026-11-22
- 国内做 App 上架难成常态:vibe coding 产物被拒才正常 — tinyfool · 2026-11-22