PanoWorld:全景世界生成

Insta360 · hf · 2026-07-13

这项工作提出 **PanoWorld**,用于真实世界的全景生成,并试图解决全景世界模型中的长程记忆问题。 主要贡献包括: - 利用全向表示的旋转等变性,把旋转转化为隐式几何变换 - 设计 **DPRC**(Dense Panoramic Ray-Conditioning)和 **GMA**(Geometry-aware Memory Augmentation) - 提出三阶段训练流程,逐步优化各模块 - 构建 **World360** 数据集,包含真实无人机全景视频与 AirSim360 生成的高质量模拟片段 作者在 World360 上进行了大量实验,结果显示 PanoWorld 相比其他方法有明显提升;模型、训练代码和数据集都计划公开。

原文链接 →