ArtHOI 被接收 TPAMI:用生成视频做无监督 4D 人物交互合成
liuziwei7 · x · 2026-10-25
HUST、NTU、BAAI、清华等机构联合提出的 ArtHOI 被 IEEE TPAMI 接收,核心思路是让机器人从 AI 生成的视频中学习:把扩散模型生成的 2D 单目视频转化为物理合理的 4D 铰接人-物交互(HOI)数据,全程无需 3D 运动监督。
技术要点:
- 将铰接 HOI 合成建模为「从单目视频先验做 4D 重建」的逆渲染问题,自然满足接触、铰接与时间一致性
- 第一阶段用光流线索 + SAM 掩码做部件分割,映射到 3D 高斯部件,通过准静态绑定分离运动/静止区域
- 第二阶段解耦重建:先恢复铰接物体几何,再合成完整交互场景
可生成涉及门、柜子、冰箱、微波炉等铰接物体的真实人-物交互,保持正确接触与运动学约束。项目页、arXiv 与代码均已公开。
「具身」频道最新
- 德国 NEURA 发布 4NE1 Gen4 人形机器人:减重 20%,搭自研 Neuron AI — CyberRobooo · 2026-10-25
- 博主 Kindle 刷机新进展：AI RSS 订阅、扫码配 API key、将开源 — vista8 · 2026-10-25
- 三名亚美尼亚少年造视障辅助机器人，夺 WRO 欧洲公开赛冠军 — RevLebaredian · 2026-10-25
- 苹果折叠屏 iPhone 铰链用 AI 匹配制造,量产屏幕现折痕争议 — flngr · 2026-10-25
- 玩家 400 美元复刻 MicroDuck 机器鸭，非官方主控方案跑通特技动作 — TinfoilTricorn · 2026-10-25
- Nvidia 开源 Flora：机器人视频标注成本降至 GPT-6 Astra 的 1/125 — The Decoder · 2026-10-25