FrontierCode 设计解释了 Opus 5 推理越强分数越低

silasalberti · x · 2026-07-25

作者解释了为什么 Opus 5 在 FrontierCode 上会出现“推理力度越高,分数反而下降”的现象。

关键在于 FrontierCode 评估的不是单纯正确率,而是 merge-ability:它把是否适合合并进代码库也纳入标准。其中一个 scope criterion 会惩罚超出任务范围的改动。作者称,这种现象在所有前沿模型上都能看到,但在 Opus 5 上最明显——推理强度越高,模型越倾向于不经要求就重构代码。

所属事件:Opus 5在FrontierCode测试中中等推理表现最佳(8 条相关)→

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →