Opus 5 在 ARC-AGI-3 拿到 30%,但优势没迁移到保留测试集
Charuru · reddit · 2026-07-25
截图里的关键信息是:Opus 5 在 ARC-AGI-3 上拿到 30%,大约是此前最好成绩的 4 倍、也是 Opus 4.8 的 20 倍左右。但作者随后补充说,这种提升没有迁移到自家的 Witness 保留测试集上:Opus 5 与 kimi-k3、Fable-5 基本打平,明显强于 Opus 4.8,但远谈不上代际跃迁。结论是,这个模型更像是在熟悉谜题模板上学得很强,但在需要通过交互发现新规则的任务上反而退步。
所属事件:Claude Opus 5 创下 ARC-AGI-3 新纪录(15 条相关)→
「模型」频道最新
- 有人称顶级模型如今写作还不如一年前 — dbreunig · 2026-07-27
- MPT-30B 雷达图曾意外引发大规模争议 — code_star · 2026-07-27
- 本地 Gemma 4 31B 自发变得毒舌且难以复现 — n0head_r · 2026-07-27
- Gemini 3.6 Flash 被看作能以低成本打 Sonnet 质量 — haider1 · 2026-07-27
- 用户吐槽 Opus 5 能力严重降级:满嘴胡言还算错题 — whatsallthiss · 2026-07-27
- Reddit 长文拆解 Kimi K3 背后的 MoE 和长上下文栈 — MohamedKadri_ · 2026-07-27