DeepMind 提出RMMD蒸馏
qberthet · x · 2026-07-18
- 这条转发的是 Google DeepMind 的新论文:**Rewarded Moment Matching Distillation(RMMD)**。 - 论文试图解决一个问题:**如何让扩散模型在保持蒸馏信号的同时,变得更快,并且还能对下游奖励对齐**。 - 重点在于把“加速”和“奖励对齐”结合起来,而不是只追求速度或只做简单蒸馏。
qberthet · x · 2026-07-18
- 这条转发的是 Google DeepMind 的新论文:**Rewarded Moment Matching Distillation(RMMD)**。 - 论文试图解决一个问题:**如何让扩散模型在保持蒸馏信号的同时,变得更快,并且还能对下游奖励对齐**。 - 重点在于把“加速”和“奖励对齐”结合起来,而不是只追求速度或只做简单蒸馏。