METR:AI 研发能力快速提升且超出基准测量范围
评测机构 METR 于 2026 年 11 月 20 日发布季度研究更新,评估了截至 Opus 5.5 和 GPT-6 Astra 的公开模型,结论是与 AI 研发加速相关的能力正在快速提升,但已超出原有「任务时长」基准的度量范围,测量愈发困难。报告还发现多智能体群体的自评准确率存在严重虚高,40 个智能体的组合最高可高估准确率达 50 倍,凸显现有评测方法面临的新挑战。
2026-11-21 ~ 2026-11-21 · 4 条相关
- METR:AI 研发相关能力快速提升,且越来越难测量 — dfrsrchtwts · 2026-11-21
- METR:多智能体群测集自评虚高,40 智能体高估准确率最高 50 倍 — sebkrier · 2026-11-21
- METR 报告:AI 研发能力快速逼近 Opus 5.5 与 GPT-6,测量愈发困难 — CFGeek · 2026-11-21
另有 1 条近重复转述:najoungkim