4DAnyone:一段手机随手拍视频,重建可旋转的 4D 人体
anselm · x · 2026-08-31
4DAnyone(浙江大学、蚂蚁集团等,SIGGRAPH Asia 2026)只需一段普通手机单目视频,即可重建 4D 高斯泼溅(4DGS)人体体积视频——无需多相机阵列、标定或三脚架。
- 传统 4D 人体重建依赖同步相机阵列,成本高、场景受限;该工作通过生成「那套相机阵列本会拍到的多视角视频」来实现单视频重建。
- 核心难点是规模化视角一致性:Reference Context Packing(RCP)把线性增长的参考上下文压缩进固定预算,Target Context Routing(TCR)在分组生成间路由上下文以避免跨组结构漂移;并以 3D 骨架提供稀疏但精准的条件。
- 在舞蹈、角色、体育、舞台、演讲、时装等真实场景中表现稳健,对轻微相机运动、未知相机内参与位姿均能泛化。
- 论文、代码与模型均已放出。
所属事件:4DAnyone 开源:单段手机视频重建 4D 人体(3 条相关)→
「多模态」频道最新
- 日式体育挑战:30 秒实拍级视频生成 — SimplyAnnisa · 2026-09-01
- Seedance 2.5 升级:提升 AI 虚拟网红视频的一致性与故事性 — aftahi_ai · 2026-09-01
- 利用 Krea.ai 生成恶魔罗刹角色视频 — CurieuxExplorer · 2026-09-01
- AI 情景喜剧已能连追四集,《Bad Cat》成最新标杆 — venturetwins · 2026-09-01
- Spatial Studio 支持高斯泼溅动画与 4K 导出 — Scobleizer · 2026-09-01
- Breeze-TTS-2 模型 Demo 上线 Hugging Face — BreezeBlue · 2026-09-01