SOOFI 被指见过多项拿来对比 Nemotron 的评测集
JJitsev · x · 2026-07-26
这条帖把训练与评测数据集对应关系列得更清楚:
- 作者称 SOOFI 训练集里的很多评测来自 TU Darmstadt 的数据。
- 他同时给出了 Nemotron 3 Nano 的训练数据来源。
- 结论仍然是:对比里用到的多个 benchmark,SOOFI 都已经见过,而 Nemotron 没见过。
所属事件:SOOFI 模型被指评测数据严重泄漏,对比 Nemotron 失去公平性(9 条相关)→
「模型」频道最新
- 有人注意到 Opus-5 的词汇选择很特别 — adonis_singh · 2026-07-26
- Google 的 Gemma 团队公开征集下一代能力需求 — osanseviero · 2026-07-26
- 阿里用 Qwen3.8 反击,Kimi K3 让中美模型差距继续收窄 — emmanuelvivier · 2026-07-26
- Moonshot 发布开权重 Kimi K3,称多项测试逼近美国顶级模型 — emmanuelvivier · 2026-07-26
- 硅谷分歧加剧:中国开源权重模型已逼近美国顶级系统 — emmanuelvivier · 2026-07-26
- Kimi-K3 宣称在 IMO 2026 Lean 4 证明拿下 6/6 — songhan_mit · 2026-07-26