机器人中的潜在动作研究:无需真实标签
ylecun · x · 2026-07-20
探讨了潜在动作在机器人领域的前沿应用:不再直接预测机器人的关节指令或控制器输入,而是学习一个紧凑的潜在编码来解释相邻两帧视频间的变化,从而在训练中完全不需要真实的动作标签。
- Genie 模型验证:DeepMind 在 2024 年提出的 Genie 模型是一个清晰的概念验证。它通过逆模型观察连续帧,推断出解释画面转换的离散潜在动作。即使从未见过真实的动作标签,仅凭学到的动作空间就足以逐帧控制生成的视频。
- 跨平台迁移性:这种潜在空间具有可迁移性,可以直接用于在未经任何特定机器人标注的视频上训练模仿学习智能体。
「具身」频道最新
- 用户用 Claude Code 拆解本田车机:发现 root 后门与静默装 APK — IndraVahan · 2026-10-26
- Temple 健康设备开启预售,用户质疑:未见实效前谁愿戴 — abhishekcode42 · 2026-10-26
- FLASH 仿真框架:单卡 RTX 5090 上分钟级学会布料折叠 — ChongZzZhang · 2026-10-26
- Luke Wroblewski 细节控:iPhone Duo 圆角复刻初代 iPhone — LukeW · 2026-10-26
- 人形机器人两年跑赢人类:半马破纪录、百米超博尔特 — ben_j_todd · 2026-10-26
- 人形机器人每一步都是连续纠偏:看 demo 要看摔倒后怎么恢复 — Olivier__OG · 2026-10-26