METR 报告:10 月后 Anthropic 模型能力提升速度加快 1.9 倍
NathanpmYoung · x · 2026-11-06
METR 发布新评估,引用者 fleetingbits 给出了几点快速解读:
- METR 报告自 2025 年 10 月以来,Anthropic 模型的 AECI 分数增速为此前的 1.9 倍(95% 置信区间 1.5–2.8);
- 报告主要证据来自 Anthropic 内部 ECI 的扩展版本以及研究人员反馈;METR 声称还有其他证据但被 Anthropic 涂黑,推测是关于算法效率随时间提升的信息;
- 作者认为 Anthropic ECI 数据可信,且指出 Anthropic 不再公开发布最强模型,使公开 ECI 的参考价值下降;
- 若把其他厂商的历史模型纳入 ECI 基准,加速倍数降至 1.4 倍——因为 2025 年上半年 Anthropic 模型弱于 OpenAI 等前沿模型;
- 研究人员报告从研究型 agent 获得了大量增益,可以并行启动更多实验。
METR 原报告同时提醒:benchmark 分数只是加速的一项证据,分析选择会影响估计,且 benchmark 分数与真实世界能力的映射仍不清楚。
所属事件:METR 评估称 Anthropic AI 研发提速至 1.9 倍,社区震动(51 条相关)→
「漫话AGI」频道最新
- Palisade 研究员:模型样样变强但仍不幽默,charisma 成短板 — JeffLadish · 2026-11-06
- 研究员质疑长程 Agent 叙事:跑一年交答案的活儿几乎不存在 — RexDouglass · 2026-11-06
- 纽约联储数据:CS 专业失业率 7%,已超物理学专业 — shauseth · 2026-11-06
- Palisade 研究员:AI 进展快于 AI 2027 预测,Anthropic 研究员预期 2027 年中自动化大部分研发 — JeffLadish · 2026-11-06
- NLP→视觉→回归语言:一位博士研究者的语言认知反思 — benno_krojer · 2026-11-06
- Teknium 质疑 METR「无瓶颈」结论:融资与算力成本明明在恶化 — Teknium · 2026-11-06