SOOFI 被批自造指标包装能力
JJitsev · x · 2026-07-19
作者认为，SOOFI “frontier-level / champion”的说法站不住脚，因为它发明了一个别人都不用的“capability index”来给自己打分，再据此声称与原始 Nemotron-3-Nano 持平甚至更强。
他还指出，这类说法与报告中的“透明”叙事相冲突：如果结论建立在自定义指标和更大训练量之上，却没有把前提讲清楚，就会误导读者。
所属事件:欧洲开源模型 SOOFI 被指评测泄漏与过度包装(11 条相关)→
「模型」频道最新
- AA 公布 Intelligence Index v4.3.2 各子项评测明细 — ArtificialAnlys · 2026-10-27
- Terminal-Bench 4.0:GPT-6.1 Terra 涨约 20 分,追平 GPT-6.1 Sol — ArtificialAnlys · 2026-10-27
- AA 实测:GPT-6.1 Terra 幻觉率降 50%,准确率还升 2 分 — ArtificialAnlys · 2026-10-27
- AA 实测 GPT-6.1 Terra:编码 Agent 得 48 分,成本仅前代三分之一 — ArtificialAnlys · 2026-10-27
- 网传 Terminal-Bench 4.0 图：GPT-6.1 Terra 以最低成本登顶 — Angaisb_ · 2026-10-27
- OpenAI 推出 GPT-6.1 Terra:主打低成本高速计算机操作 — OpenAIDevs · 2026-10-27