RoboTok 论文:检索互联网演示视频,机器人任务成功率提升 42.2 个百分点
ceciletamura · x · 2026-10-15
Rice University 团队发布 RoboTok,一个面向机器人学习的可扩展数据引擎,解决机器人演示数据采集昂贵、难以覆盖真实世界多样任务的瓶颈。
- 核心方法:以查询用的人类操作视频为输入,从互联网视频库中检索与操作相关的演示用于训练灵巧操作策略
- 表示学习:从估计的以演员为中心参考系的 3D 手部轨迹中学习潜在运动空间,使操作行为的比对不受相机视角、场景外观、人物遮挡影响,同时足够紧凑以支持高效索引检索
- 实验结果:在检索指标和下游策略成功率上均超越现有机器人数据检索方法;真实世界机器人实验中,RoboTok 引导的策略相对各任务最强基线平均提升 42.2 个百分点的成功率
论文已挂 arXiv(2609.03199),作者还包括 Bowen Wen、Kaiyu Hang 等。
所属事件:Rice 团队发布 RoboTok：从互联网视频挖掘机器人演示数据(2 条相关)→
「具身」频道最新
- 10 月 22 日具身智能线上论坛：四家机器人初创谈评测与失败 — carrycooldude · 2026-10-15
- Vela：用样条连续轨迹表示改造 VLA 模型，跨本体泛化操作 — Yifan Li · 2026-10-15
- Scoble：医疗机器人明年铺开，人形机器人或还需 2-7 年 — realmeetjames · 2026-10-15
- KAIST 推出 BeetleBot：手指弯曲即可操控的甲虫软体机器人 — CurieuxExplorer · 2026-10-15
- 14 岁少年造手持 AI 农药检测仪，获「美国顶尖青少年科学家」 — nordicinst · 2026-10-15
- 公开悬赏：击败 Proof of Quality 评测即可赢得一辆特斯拉 — EnigmaFund · 2026-10-15