SplatGuide:一份 3DGS 重建当三种先验,免位姿新视角合成达 SOTA
zhenjun_zhao · x · 2026-08-19
arXiv 新论文(2608.16863,Yejun Zhang 等)。面向无位姿图像的逼真新视角合成:以往流程把前馈 3DGS 重建与多视角扩散结合,但每次只从重建中提取一种信号(像素渲染或学习特征),也无人利用逐高斯可见性做遮挡感知的参考视角选择——存在「信息断层」。
SplatGuide 让单次 3DGS 重建同时充当三种角色:渲染图像提供像素级几何条件;逐高斯源视角索引渲染成目标视角投票图,用于遮挡感知参考选择;重建 token 经交叉注意力提供特征级引导。三种信号都来自同一次前向重建。在 RealEstate10K、DL3DV、Tanks-and-Temples、Mip-NeRF 360 上取得免位姿新视角合成 SOTA;在 RealEstate10K 上,中等数量输入视角下甚至超过使用真值位姿的基线。
「多模态」频道最新
- AI 仅凭像素定位照片地点,精度达米级 — saibharadwaj · 2026-08-20
- Runway Gen-2 升级:1080p 视频支持 50 参考图与 30 秒生成 — tlakomy · 2026-08-20
- 利用渲染技术制作 Thesis 岩石雕塑流程 — every · 2026-08-20
- Swarms 构建视频/音乐/语音推理引擎,直指 LLM 输出二进制 — bingxu_ · 2026-08-20
- AI 将经典网络迷因绘制成同一条街道 — _jaydeepkarale · 2026-08-20
- 用户分享 Kling AI Omni 3 的趣味生成效果 — LudovicCreator · 2026-08-20