Gemini Decision 1 首测:知识推理居首但成本过高
Google 发布首个决策模型 Gemini Decision 1,Artificial Analysis 于 11 月 12 日给出完整评测:Decision Index v2.1 总分 66,未进入前沿水平,与 Elephant 9B、Jev 1.1 等相当。
已确认
- 总分 66,知识推理分项(AA-Omniscience-Decision)居首,领先 d1-ultra(64)与 GLiD 系列等,@ArtificialAnlys 指出其胜出依靠校准而非准确率
- @Angaisb 曝光的评测表显示:Jevbench 92.2%、Amazon ESCI 58.7%、New Yorker Caption 79.7%、PubMedQA 79.8%,多项基准领先,校准误差仅 0.025
- 延迟:每 21 个任务平均 211ms,快于 Drex Max v1.1(283ms)和 GLiDE v1.2(284ms),但慢于小模型,整体居中游
- 成本:每 100 万任务 $345,与 GPT-6 Luna(Decisions,$339)接近,是榜首 Drex Max 的 3 倍多
为什么重要
这是 Google 首次进入决策模型赛道。@ArtificialAnlys 的评测显示其在推理质量和校准上有竞争力,但性价比明显落后,若要冲击榜单前列需大幅降本。
2026-11-12 ~ 2026-11-12 · 6 条相关
- 第 1 集:Google 发布 Gemini Decisions API 与决策模型 Decision 1(2026-11-12,21 条)
- 第 2 集:Gemini Decision 1 首测:知识推理居首但成本过高(2026-11-12,6 条)
一手来源
- Gemini Decision 1 决策指数得分 66 未进前沿,成本高出对手 3 倍 — ArtificialAnlys ·
- Artificial Analysis 实测 Gemini Decision 1:每任务 211ms 居中游 — ArtificialAnlys ·
- Gemini Decision 1 跑分曝光:多数基准领先,校准误差仅 0.025 — Angaisb_ ·
- 【源头】Gemini Decision 1 决策指数得分 66 未进前沿,成本高出对手 3 倍 — ArtificialAnlys · 2026-11-12
- Gemini Decision 1 单百万任务成本 $345,为榜首 Drex Max 3 倍多 — ArtificialAnlys · 2026-11-12
- Gemini Decision 1 知识推理评测居首,靠校准胜出而非准确率 — ArtificialAnlys · 2026-11-12
- Gemini Decision 1 单任务耗时 211ms,快于 Drex Max 但慢于小模型 — ArtificialAnlys · 2026-11-12
- 【源头】Artificial Analysis 实测 Gemini Decision 1:每任务 211ms 居中游 — ArtificialAnlys · 2026-11-12
- 【源头】Gemini Decision 1 跑分曝光:多数基准领先,校准误差仅 0.025 — Angaisb_ · 2026-11-12