扩散模型训练优化新理论:在离散噪声级别采样效果最佳
LucaAmb · x · 2026-08-11
作者分享了关于扩散模型最优训练的理论研究《From Atoms to Entropy: Optimal Noise Allocation for Diffusion Training in the Convex Regime》。
该理论在凸域假设下,通过时空 Fisher 几何表达了优化问题。研究得出了一个引人注目的结论:在最优训练策略下,应该在离散的噪声级别上对样本噪声进行采样,且最优调度具有有限的原子集。
所属事件:研究提出扩散模型训练的最优噪声分配理论(2 条相关)→
「研究」频道最新
- Agent跑十次成功率骤降:论文揭示计算机任务可靠性陷阱 — xwang_lk · 2026-08-12
- 30B小模型微调后写代码证明,击败50倍体量大模型 — fhuszar · 2026-08-12
- ComfyResearch 开源:像玩乐高一样可视化研究 AI 学习机制 — ZimingLiu11 · 2026-08-12
- LessWrong文章探讨:当前AI系统在基础对齐上仍存在明显缺陷 — dpaleka · 2026-08-12
- 4M 参数小模型击败 20 倍大模型,合成数据再证奇迹 — bittingthembits · 2026-08-12
- ComfyResearch:像拼乐高一样做 AI 实验 — ZimingLiu11 · 2026-08-12