4DAnyone:一段手机随手拍视频,重建可旋转的 4D 人体
anselm · x · 2026-08-31
4DAnyone(浙江大学、蚂蚁集团等,SIGGRAPH Asia 2026)只需一段普通手机单目视频,即可重建 4D 高斯泼溅(4DGS)人体体积视频——无需多相机阵列、标定或三脚架。
- 传统 4D 人体重建依赖同步相机阵列,成本高、场景受限;该工作通过生成「那套相机阵列本会拍到的多视角视频」来实现单视频重建。
- 核心难点是规模化视角一致性:Reference Context Packing(RCP)把线性增长的参考上下文压缩进固定预算,Target Context Routing(TCR)在分组生成间路由上下文以避免跨组结构漂移;并以 3D 骨架提供稀疏但精准的条件。
- 在舞蹈、角色、体育、舞台、演讲、时装等真实场景中表现稳健,对轻微相机运动、未知相机内参与位姿均能泛化。
- 论文、代码与模型均已放出。
所属事件:4DAnyone 开源:单段手机视频重建 4D 人体(3 条相关)→
「多模态」频道最新
- 开源工具 ebook2audiobook 免费把电子书变有声书,已获 2 万 star — thisguyknowsai · 2026-10-16
- AI 生成 Nicole Kidman 超现实时装大片:巨大雕塑感廓形震撼网友 — OVolosin82152 · 2026-10-16
- Valtz 新版支持 FLUX.3,Mac 本地生图最高 4K 分辨率 — TgoAI · 2026-10-16
- H3 视频换角 LoRA V1.5 发布,附完整 ComfyUI 工作流 — linoy_tsaban · 2026-10-16
- ForcingBooster 按块分配去噪步数,自回归视频生成算力省一半 — VAST-AI · 2026-10-16
- 东京现 Gemini AI 拍照亭,把游客变成公仔与微缩场景 — bradneuberg · 2026-10-16