LAW 提出「去扩散化」语言模型:纯自条件化取代扩散采样
ArnaudDoucet1 · x · 2026-10-23
扩散语言模型中的 Self-Conditioning(SC)一直有争议:使用 SC 意味着采样时要同时维护两个状态。近期不少工作试图去掉 SC,而这项名为 LAW(Loopholing All the Way)的新工作反其道而行:能不能去掉扩散本身,让语言模型纯粹基于自条件化构建?
论文以 8 条线程形式展开,由研究者 jdeschena 转发、扩散模型领域知名学者 Arnaud Doucet 转发扩散,受到一定关注。
所属事件:LAW:纯自条件化语言模型取代扩散采样(3 条相关)→
「模型」频道最新
- Fable-5.1 可在普通图片里藏密文,另一实例无提示完整还原 — birchlse · 2026-10-23
- TypeSafe 推出「决策模型」Jev:文本进、浮点数出,输入仅 $0.042/M — ariG23498 · 2026-10-23
- 微软 MAI-Base-2 缩放阶梯曝光:L42 约需 1.8×10^23 FLOPs — teortaxesTex · 2026-10-23
- ggufbench 实测:本地模型 agentic 编码,27B 类已够用,125B 未夺冠 — Joralk_ · 2026-10-23
- NVIDIA 开源 PersonaPlex-7B:能边听边说的全双工语音模型 — solyarisoftware · 2026-10-23
- NVIDIA 发布 Kumo Relational:直接在关系库上做预测的基础模型 — solyarisoftware · 2026-10-23