专题 · FULL STORY

HiP3R:从发布到开源的长视频3D重建

南洋理工陈成组发布 HiP3R,以分层位姿图优化解决前馈模型难以处理数千帧长视频、重访场景几何不一致的难题,可将千帧长视频重建为一致的 3D 场景。项目随后正式开源,方法与代码均已公开。

2026-10-24 ~ 2026-10-26 · 2 集 · 5 条

第 1 集 · 南洋理工发布 HiP3R:长视频 3D 重建一致性大幅提升(2026-10-24,2 条)

南洋理工大学陈成(Change Loy)组发布 HiP3R,针对前馈模型难以处理数千帧长视频的问题,提出分层位姿图优化方案:将长视频切分为重叠块,做块级 Sim(3) 对齐,再把局部 3D 重建拼接起来,保持全局一致性,解决长序列重建中的漂移与不一致。实验中平均 ATE 从 8.29 米降至 4.02 米,项目页面、论文与代码已公开。

第 2 集 · HiP3R 开源:千帧长视频重建为一致 3D 场景(2026-10-26,3 条)

ccloy 发布并开源 HiP3R 项目,解决长视频 3D 重建中局部结果各自良好、但拼接时漂移、重访同一位置几何不一致的难题。该方法通过两级对齐机制,先将视频分段对齐到一致的布局与尺度,再逐步细化各相机位姿,从而把数千帧长视频的局部重建拼接成单一连贯的 3D 场景。它兼容基于分块的重建与流式重建方法,且无需额外训练。