CompVis 开源 RayDer：真实视频自监督新视角合成，呈现幂律缩放

rsasaki0109 · x · 2026-11-10

LMU 慕尼黑 CompVis 团队（Björn Ommer 组）ECCV 2026 论文 RayDer 已在 GitHub 开源（含最小 PyTorch 复现、训练与视频生成脚本，59 star）。方法将三个网络统一为一个 Transformer，引入动态状态预测 dropout，通过自回归训练改进位姿学习，从而在通用动态真实视频上稳定训练自监督新视角合成（NVS）模型。

性能随数据、模型规模、算力呈幂律缩放（R² > 0.99），与 LLM 的 scaling 规律类似。作者放出 RayDer-L 与 E-RayZer 的 zero-shot 定性对比，覆盖 DTU、CO3D、Mip360、LLFF 及近零上下文重叠的极端设置，RayDer 全面更优。