OmniRay 论文:单一模型适配鱼眼/全景等五类相机的单目 3D 重建
anand_bhattad · x · 2026-10-24
论文 OmniRay 提出 camera-agnostic 的单目 3D 重建：单一模型无需相机内参或类型输入，从单张图像即可恢复至尺度的相机系点云，覆盖针孔、GoPro、鱼眼、折反射、全景五类相机几何（GoPro 与折反射配置未参与训练）。
- 动机：单目模型多假设针孔相机，广角影像会畸变；camera-aware 模型用单一固定基底的 per-pixel ray field，难以同时表达整体投影与细微变化
- 方法：Ray Module 由单调径向基（径向对称结构）、球谐残差（平滑偏离）、自由残差（局部变化）三部分组成，作为球面上的连续旋转组合，兼容多样相机几何
- 实验显示在多种相机配置上取得 camera-agnostic 单目 3D 重建新 SOTA
所属事件:OmniRay：单张图免标定重建任意相机的 3D 几何(4 条相关)→
「多模态」频道最新
- 5cm 体素搭出五重塔庭园：AI 生成细节惊艳但灯光平淡 — cedric_chee · 2026-10-25
- AI 视频生成把数月工作量压到几天,创作者感慨 2027 世界将大不同 — enggirlfriend · 2026-10-24
- Mark Soares 公开 AI 音乐视频全流程：先备 B-roll 镜头清单再写 prompt — lmoroney · 2026-10-24
- 全程本地开源模型打造 AI 悬疑短剧《The Garden Archive》 — OneManHorrorBand · 2026-10-24
- Reddit 用户开源 NVAI 应用:一张照片生成场景并配语音转视频 — No-Tap6022 · 2026-10-24
- 复古风 AI 音乐视频：1960 年代风格的慕尼黑啤酒节万圣节曲目 — ComputerArtClub · 2026-10-24