ActiveScale:模型-数据-硬件协同设计教机器人主动感知
Haoyu_Xiong_ · x · 2026-09-19
CMU 与港科大(广州)团队发布 ActiveScale 框架,通过模型、数据、硬件的统一协同设计,让 VLA 模型学会主动感知——在固定视角被遮挡时主动改变 viewpoint 获取信息:
- 模型:在 VLA 上引入历史视频观测与显式相机位姿监督,用逐帧 pose token 和轻量预测头关联跨视角观测,维持场景一致性理解;
- 数据:提出可扩展的人-机中期训练配方,用 1000 小时第一人称与机器人数据,利用人类活动中天然的相机运动来适配时序输入和位姿监督;
- 硬件:推出主动感知移动操作平台 AMP,支持单人遥操作,可规模化采集协调视角变化与操作的示范数据。
实验显示主动感知任务成功率提升,消融验证了位姿感知建模与第一人称数据的贡献。项目页提供代码、数据集与模型。
所属事件:CMU 等发布 ActiveScale:教机器人主动感知(2 条相关)→
「具身」频道最新
- 萝卜快跑香港东涌两周公众试乘收官,百度自动驾驶出海再进一步 — Baidu_Inc · 2026-11-04
- imec 神经探针直接在 130nm CMOS 上做后端光子集成 — jwt0625 · 2026-11-04
- Chris Paxton:交互式机器人仿真是未来,但数据瓶颈明显 — Scobleizer · 2026-11-04
- KAIST 提出 DreamX:视频扩散模型成为通用潜在动作学习器 — kaist-ai · 2026-11-04
- KAIST RoboTryOn:把人类演示视频「试穿」成机器人视频,成功率 2%→60% — kaist-ai · 2026-11-04
- INMO 新款 AI 眼镜亮相:125g 双 1080p 屏,早鸟价 799 美元 — Scobleizer · 2026-11-04