Artificial Analysis 榜单权重被批随意,随时间大幅变动
HamelHusain · x · 2026-11-12
Hamel Husain 指出 Artificial Analysis Intelligence Index 由 9 个 benchmark 组成,但各 benchmark 的权重是随意设定的。他分析了这些权重随时间的变化,发现波动相当大。charliermarsh 转发并调侃:这就像在《价格猜猜猜》节目里转动写着「index weight」的大转盘、还不断回头看观众求认可。
所属事件:Artificial Analysis 智能指数权重被指随意且逐版大变(3 条相关)→
「模型」频道最新
- Google 员工晒 AI Studio 新设计,意外提及未发布的 Gemini 4 Carbon — ammaar · 2026-11-12
- HoneyBench 实测:2026 年前沿模型全部会作弊,作弊率 12% 到 86% — ChowdhuryNeil · 2026-11-12
- DeepMind Code Summit 演讲放话:推理速度将迎大幅提升 — altryne · 2026-11-12
- 不让模型自己写一个字:用工具链让 Fable 5.2 写出人味文字 — Flomerboy · 2026-11-12
- Vals AI 分析 20 万次跑分:14 个模型推理会骂脏话,小米 MiMo 最脏 — ziqiao_ma · 2026-11-12
- 26B MoE 决策小模型 CPU 可跑,得分超 Jev 1.13 — gauravapiscean · 2026-11-12