评测称 Fable 5.1 失败率减半:每百次仅 7 次失败、幻觉率 0.7%
ryanshrout · x · 2026-09-03
- Patrick Moorhead 转发 PINNACLE 基准的 agentic 成本效益评测:Fable 5.1 在成本 1.8 倍的情况下完成任务量多 3.6 倍,失败数减半。
- 引用分析指出,阻碍 AI agent 进生产的不是智能而是失败率:Claude Opus 5 与 GPT-5.6 Sol 每 100 个工作流失败约 14 次,迫使企业全程人工监督。
- Fable 5.1 在其测试中把失败降到每 100 次约 7 次,对文档无法回答的问题编造答案的比例为 0.7%,远低于 Opus 5 的 7.6%。
- 结论:失败率减半、幻觉率降一个数量级,意味着 agent 从「每单都要人审」变为「只审例外」——代价是账单更贵。
所属事件:PINNACLE 评测:Claude Fable 5.1 agent 失败率减半(2 条相关)→
「模型」频道最新
- 仅微调最后两层,模型就能察觉只读探针的存在 — Sauers_ · 2026-10-18
- 付费 Google AI 订阅撞墙:自定义域名账户被要求转个人账号 — ChrisRackauckas · 2026-10-18
- 560B MoE 塞进 4 台 DGX Spark:Ling 3.1 Flash 用 llama.cpp RPC 跑通 — BerryBlush_Rogers691 · 2026-10-18
- 用户追问 OpenAI 成人模式:承诺一年仍未落地 — ___Patrice___ · 2026-10-18
- Polymarket 开盘押注下一款 Gemini 模型由谁发布 — Polymarket · 2026-10-18
- Grok 一本正经盘点:对亚裔等群体有歧视,对非洲拉美用户没有 — teortaxesTex · 2026-10-18