斯坦福 457 页 AI Index 报告解读:成本每年降 30%,头部模型差距缩至 5.4%
mdancho84 · x · 2026-10-27
mdancho84 对斯坦福 HAI 457 页《AI Index Report 2025》做了要点拆解,核心数据与结论:
- 成本与效率:AI 性价比每年提升约 30%,能效每年提升约 40%,AI 正从「demo」变成「default」。
- 算力持续爆炸:知名模型训练算力约每 5 个月翻倍,数据集也快速扩张,scaling 仍在继续但只有少数玩家玩得起。
- 产业主导前沿:2024 年约 90% 的知名 AI 模型出自产业界(2023 年约 60%),前沿越来越是产品+基础设施的游戏。
- 模型趋同:Chatbot Arena 上第 1 与第 10 名模型差距一年内从 11.9% 收窄到 5.4%,「选哪个模型」的重要性让位于工作流、evals 和数据。
- 开源逼近闭源:领先开源与闭源模型在 Chatbot Arena 的差距已缩窄到约 1.70%(截至 2025 年 2 月),影响构建策略与预算。
- 基准被刷爆:MMMU/GPQA/SWE-bench 等难基准 2023→2024 提升 1967 个百分点,公共基准越来越不可靠。
- 职业建议:2026 年数据科学家的杠杆技能是自建 eval harness、agent+pipeline 工作流工程、推理成本与效率意识。
「漫话AGI」频道最新
- 「AI 接管认知就是释放你的 VRAM」:认知外包讨论引发共鸣 — generativist · 2026-10-28
- Dario Amodei 自述离开 OpenAI 创办 Anthropic:因对安全处理失去信任 — kimmonismus · 2026-10-28
- AI 安全研究者呼吁实验室员工全职投入美中协议核查,称数月内可行 — ohlennart · 2026-10-28
- 两大实验室同日各自证伪 ETH,agent「撞车发现」引Birthday悖论之问 — yian_yin · 2026-10-28
- Palantir CEO Karp:全球AI竞赛只剩美中,以色列是唯一例外 — acmoytoy · 2026-10-28
- 赛博空间三部曲终章:如果超级智能有身体,人类只是肠道菌群 — LeviTurk · 2026-10-28