f-loss 平衡频谱学习,像素级 Flow Matching 收敛提速
serrjoa · x · 2026-09-04
arXiv 论文《Balancing Frequencies and Pixels in Flow Matching》指出,像素空间的流匹配训练存在频谱偏差:自然图像能量集中在低频,像素重建损失对所有空间误差一视同仁,导致高频细节(纹理、边缘)学习被延迟。
论文提出两个方案:
- Focal Log-Frequency Loss(f-loss):在频域均衡学习信号,强化原本欠代表的高频分量;
- f→pixel 课程策略:训练早期先强调频域学习覆盖全频段,再过渡到标准像素空间 v-loss 做空间细化。
方法概念简单、无需改动架构,可作为 flow matching 损失的即插即用替代;在多个模型规模上加快收敛速度并改善 FID。
「多模态」频道最新
- 用户用 Grok Build 全自动剪出 Tesla Cybercab 电影感视频 — elonmusk · 2026-09-04
- 用 60 张童年照片微调 SDXL,模拟「记忆回忆」的实验 — uisato · 2026-09-04
- 用 MiniMax H3 复刻 X 热门打斗短片,参考图一致性全程保持 — MixZealousideal9359 · 2026-09-04
- Midjourney 单词提示实验:一个古方言词 Sillion 出图 — tisch_eins · 2026-09-04
- 一条 prompt 生成可逛的 3D 水族馆:Claude 加 Thrixel 新玩法 — RanaHanocka · 2026-09-04
- 多位创作者展示 AI 实验:联觉 MIDI、动画与抽象画 — floguo · 2026-09-04