PokeBot 发布 RoboAPI:机器人零样本泛化走向 API 调用时代
haider1 · x · 2026-10-30
PokeBot 发布 RoboAPI,一个面向物理世界机器人的公开 API:输入机器人观测与状态,按自然语言指令近实时预测下一动作块,无需针对每个新任务做训练。Haider 等观察者认为真正的问题是它能否泛化到训练之外的硬件。
关键的技术细节在于后训练配置:借鉴 UMI,采用「腕部鱼眼相机 + 末端执行器位姿控制」的配置做对齐。结果显示:
- 在训练过的配置上表现良好,换鱼眼相机品牌(Insta360 Ace Pro2 → DJI Action 6)几乎不影响性能;
- 更重要的是成功迁移到完全陌生的机器人构型,包括差异很大的 UR7e → YAM Standard。
结论:只要机械臂有足够强的逆运动学求解能力,在腕部装一个运动相机就足以让 RoboAPI 控制它执行任务。这是把 GPT-3 式「基础模型 + API」模式搬到物理世界的尝试。
「具身」频道最新
- Neuralink 72 小时肝出 8 项功能,ALS 患者用意念点咖啡打电话 — XFreeze · 2026-10-30
- GitHub 布道师自制电子工牌,实时显示粉丝与仓库数 — 0xkarasy · 2026-10-30
- Neuralink 助 ALS 患者意念发声:动念即语音,无需打字 — XFreeze · 2026-10-30
- Generalist AI 发布 GEN-1.5, wrist cam 数据挑战 SLAM — E0M · 2026-10-30
- VisualForce:从软夹爪形变推断力度,机器人无需力传感器也能捏莓果 — du_yilun · 2026-10-30
- CMU 团队 HALO 论文:人形机器人学会与不可预测的人类协作 — Scobleizer · 2026-10-30