EgoHumanoid:用人类第一人称视频训练人形机器人
micoolcho · x · 2026-08-06
研究人员提出 EgoHumanoid 框架,这是首个利用人类第一人称(egocentric)演示数据,来训练人形机器人全身移动操作(loco-manipulation)能力的系统。
核心方法:该框架将大量的人类第一人称视角数据与少量机器人遥操作数据共同用于训练视觉-语言-动作(VLA)策略。为了弥合人类与机器人之间的具身差异,研究团队设计了一套对齐管线:
- 视角对齐:减少视觉上的差异。
- 动作对齐:将人类的运动映射到统一的人形机器人控制空间中。
实验结果:真实世界实验表明,引入无机器人的人类视角数据后,泛化性能比仅使用机器人数据提升了 51%,尤其是在未知环境中的表现提升显著。
「具身」频道最新
- 用 ESP32 和旋转屏重塑 2015 年的 AI 助手 — viksit · 2026-08-06
- Karpathy 开源 AutoResearch,自动化驱动具身智能突破 — teortaxesTex · 2026-08-06
- 马里兰大学推HumanEgo:用人类视频训练机器人 — furongh · 2026-08-06
- 李飞飞详解空间智能:WorldLabs收购SceniX,打造机器人数字训练场 — 量子位 · 2026-08-06
- 开源 DIY 翻译机:基于树莓派与 Gemma 模型打造 — osanseviero · 2026-08-06
- Minimax视频生成模型本地运行:4080显卡30分钟生成1280x720视频 — cocktailpeanut · 2026-08-06