JEPA4R:深度点云 JEPA 世界模型,数字孪生零样本迁移真机
AIGeeksGroup · hf · 2026-11-17
JEPA4R 是一个面向具身智能的 JEPA 世界模型:仅观测单深度相机的点云,在潜空间中预测与规划(作者称为 4D point planning),并通过冻结潜空间上的策略头输出动作。
关键结果:
- 冻结世界模型上接解码器可可视化其"想象"的 4D 点云,200 步内平均点误差仅 1.1 cm。
- 在 OGBench 的 Cube-Single/Double/Triple 与 Scene 任务上超越像素级 JEPA 模型;在 MetaWorld 和 Adroit Relocate 上分别以 98.4% 和 88.0% 排名第一,超过第二名 R3M(96.0% / 65.3%)。
- 仅在数字孪生中训练,即可零样本迁移到真实机械臂,兼容平行夹爪与灵巧手。
「具身」频道最新
- UR5 机械臂全程自主给车门穿线缆,演示到部署全在 Neuracore 完成 — stepjamUK · 2026-11-17
- Generalist AI 的 Andy Barry 将在 MIT 开讲机器人基础模型 — HanGuo97 · 2026-11-17
- 英伟达开源 USDCraft-10K:万件带关节 USD 资产喂机器人训练 — chris_j_paxton · 2026-11-17
- Hub 开源 HubEgo-100K:44.7TB 第一视角技能视频数据集 — rohanpaul_ai · 2026-11-17
- Figure 联创贬中国机器人:只会体操表演,买回家啥也干不了 — chris_j_paxton · 2026-11-17
- Figure 创始人 Adcock 做客 Diamandis 播客,畅谈人形机器人登月 — PeterDiamandis · 2026-11-17