NVIDIA 团队发布 Sigma:首个大规模连续扩散语言模型 3B/8B 权重
LucaAmb · x · 2026-11-17
NVIDIA Nemotron Labs 团队在 Hugging Face 发布了 Sigma 的 3B/8B 开源权重。Sigma 是首个大规模(3B/8B)、以似然目标训练的连续扩散语言模型(dLM):
- 性能:在数学与编程任务上可与离散扩散 LM 及自回归(AR)模型相当
- 研究价值:连续扩散范式支持对推理时干预(inference-time interventions)进行有意义的研究
- 项目由 zhihanyang 与 Wei Guo、Jean-Marie Lemercier、Simon Welker 共同领导,团队含 Arash Vahdat 等 NVIDIA 研究人员
权重已上架 Hugging Face 的 Nemotron-Labs-Sigma 合集,可供社区复现与后续研究。
所属事件:NVIDIA 开源首个大规模连续扩散语言模型 Sigma(3 条相关)→
「研究」频道最新
- 募资研究智能体性格如何塑造其社会演化 — sebkrier · 2026-11-17
- 制药序列登记 agent 实操:一条 prompt 筛查候选药风险 — nlarusstone · 2026-11-17
- CoRL 观察 coder 争论:智能体机器人卡在仿真与灵巧操作 — k7agar · 2026-11-17
- Polyak–Lojasiewicz 论文十年回顾发布,获 2026 KDD Test of Time 奖 — jasondeanlee · 2026-11-17
- 微软公开 Maia 300 细节:fp8 达 4719 Tflop/s,超 99% 理论峰值 — thoefler · 2026-11-17
- 三值道德逻辑提案:让 AI 在硬件层被强制「暂停」 — MoralLogs · 2026-11-17