Nemotron 3 Nano复现引争议
JJitsev · x · 2026-07-13
帖子在讨论 Nemotron 3 Nano 的复现评测是否靠谱。
- 发帖人指出,NVIDIA 原始报告里的分数与 soofi 报告存在明显差异;例如 HumanEval、GSM8K、MMLU-Pro 等指标,soofi 里的 Nemotron 3 Nano 都更差。
- 由于这些数字没有对齐,当前还不清楚是否真的完成了 Nemotron 3 Nano 的有效复现。
- 回复里提到:soofi 的点位略高于 Nemotron 3 Nano,表面上像是复现成功;但如果原始 Nemotron 3 Nano 的评测本身有误,那么这个比较就不确定了。
- 这条讨论的重点是:基准测试数字一旦不一致,模型复现结论就会失去可信度。
所属事件:Nemotron模型复现与定制评测引争议(4 条相关)→
「模型」频道最新
- 有人想给软件工程任务建「形态分类」数据库,好按任务选模型 — StewartalsopIII · 2026-09-11
- 用户呼声下 DeepSeek V4 Pro API 宣布继续服务,计费不变 — teortaxesTex · 2026-09-11
- 第三方实测:DeepSeek V4.1 Flash 达 GPT-6 Astra 98% 分,成本仅 1.4% — ayushtweetshere · 2026-09-11
- TheZhi 发起调查:Fable 5.1 与 Astra 发布后,编码模型选择变了吗 — TheZvi · 2026-09-11
- antirez 谈 Anthropic 禁止未成年人使用 Claude — antirez · 2026-09-11
- Engram 随机读取不适合 SSD,CPU 内存低延迟共享或成正解 — bookwormengr · 2026-09-11