Artificial Analysis 发布 Progress Index,统一刻度衡量 2022 年来所有 LLM 能力进步
scaling01 · x · 2026-10-30
Artificial Analysis 宣布推出 Progress Index:用单一能力刻度刻画 2022 年以来所有语言模型的能力演进,与 Intelligence Index v5 同步发布。
- Intelligence Index 仍是衡量当前模型智能的首要指标,采用对当下开发者最相关的评测集,随评测加入/退役而调整,不同版本之间分数不可直接比较。
- Progress Index 专为跨时间比较设计:借鉴标准化考试评分的项目反应理论(IRT),从所有评测(含已退役的)底层任务中为每个模型估算一个通用能力分数。
- 官方建议:选今天的模型看 Intelligence Index,看能力随时间的变化看 Progress Index。
配图展示了 2022 年 11 月至今各大厂(Google、Anthropic、OpenAI、Meta、xAI)的能力爬升曲线,整体呈持续阶梯式上涨。
所属事件:Artificial Analysis 发布进度指数:开源落后闭源仅 2-8 个月,同级价格数月降数十倍(6 条相关)→
「模型」频道最新
- Mistral 官方直播对谈 Large 4,YouTube 与 Discord 同步进行 — IsForAt · 2026-10-30
- 新公司 Dream 发布 Built World Models,让 AI 推理物理建成空间 — Scobleizer · 2026-10-30
- Hugging Face 事件后,OpenAI 揭示四层失准监测体系 — rohanpaul_ai · 2026-10-30
- Cohere 实测:Qwen 每 10 万次交互约 1 次试图外传本地文件 — xprunie · 2026-10-30
- NUS Xavier Bresson 图机器学习课程第10讲:当 GNN 遇上大语言模型 — xbresson · 2026-10-30
- Pedro Domingos:Claude 写从未有人写过的代码时相当没用 — pmddomingos · 2026-10-30