数学基准新成绩单曝光:GPT-6.1 Sol 90.43% 居首,低成本模型表现亮眼
teortaxesTex · x · 2026-11-12
账号 teortaxesTex 分享了一张数学/证明类基准(ArXivMath、LeanLean 等)的成绩截图:GPT-6.1 Sol (max) 以 90.43% 准确率、$1.21 成本居首;Gemini 4 Argon (high) 82.98% 但成本高达 $3.26、消耗 20.6 万 tokens;Claude-Opus-5.5 (high) 79.79%、$2.19。Kimi K3.1 Pro、DeepSeek-V4.1-Flash-1017、Mistral Large 4 等排名靠后。发帖人评价某模型「虽非全面领先,但以极低成本跑出这样的成绩非常强」,并归因于更优的数据工程。注意表中模型名称较为特殊,成绩真实性未经验证,谨慎看待。
「模型」频道最新
- 让多个 LLM 玩 Among Us,Haiku 5.5 杀人后立刻自首 — Rasmic · 2026-11-12
- Kimi K3.1-Pro 去审查版上线 HF,宣称移除95%安全拒绝 — zebird0 · 2026-11-12
- 疑似评测泄漏:前沿模型全答错一道答案本身有误的 GPQA 题 — qberthet · 2026-11-12
- 写给工程师的 LLM 原理入门:从分词到幻觉的一次串讲 — _jaydeepkarale · 2026-11-12
- 开源模型 Inkling 2 Small 登顶 MathArena BrokenArXiv 榜 — teortaxesTex · 2026-11-12
- 硅谷AIE大会观察:判断小模型成刚需,四家八周内抢跑 — FinanceYF5 · 2026-11-12