新论文：在扩散模型潜空间实现基于物理的渲染
ssh4net · x · 2026-09-21
论文《Physically Based Rendering in the Latent Space》（作者 Vuk Radovanovic、Vishesh Gupta、Adrien Gruson、Binh-Son Hua）提出把基于物理的渲染（PBR）搬进生成模型的潜空间。
- 观察：光传输现象与扩散模型 VAE 产生的潜空间数值分布之间存在对应关系。
- 方法：在 VAE 学到的特征空间里做光传输模拟，对渲染方程做修改，从而输出潜空间图（latent maps），实现物理引导的内容生成。
- 意义：相比难以控制的图像扩散模型，该方法可借助经典计算机图形学的 PBR 技术来约束生成过程。
代码即将以 MIT 协议开源。
「多模态」频道最新
- 蚂蚁百灵发布 Ling-3.0-flash-VL 多模态模型,图文视频同链推理 — nikola_mr64990 · 2026-09-21
- Seedance 2.5 生成「把海洋像毯子一样折叠」的离奇视频 — umesh_ai · 2026-09-21
- splat-transform 用多帧累积替代高斯 DOF 近似，M4 八秒渲染 256 帧 — willeastcott · 2026-09-21
- Seedance 2.5 电影感 AI 视频片段在 X 上自发走红 — CurieuxExplorer · 2026-09-21
- Runway 大赛参赛片《ALL THE WATER》设想海洋全部消失 — bennash · 2026-09-21
- MiniMax H3 视频模型：如何用第二张图替换角色身体部位 — Next-Place0 · 2026-09-21