Robbyant 开源触觉基础模型 LingBot-Touch:4983 小时数据、单编码器通吃三类传感器
kimmonismus · x · 2026-11-11
Robbyant 发布触觉基础模型 LingBot-Touch(Apache 2.0 开源,含代码与权重),定位为「机器人触觉皮层」。技术报告要点:
- 数据规模:预训练语料约 4,983 小时触觉记录,覆盖 1.33B 帧、464K 条轨迹,来源为触觉手套与机器人手的压阻、磁性与视触觉三类传感器。
- 架构:基于 JEPA 的表征模型,统一 Haptic Transformer + 模态专属 tokenizer + 规范化几何接口,在统一潜空间中融合异构触觉数据;最小编码器 HaT-Tiny 仅 5.46M 参数,支持高频推理。
- 跨传感器迁移:一个冻结编码器可读三种完全不同的传感器;在预训练未见过的 XHand1 传感器上,于全部五项探测任务上超过传感器专属适配器,接触中心误差从 5.89mm 降至 0.16mm。
- 下游任务:支持 26 个真实 + 12 个仿真机器人任务,触觉数据量越大性能持续提升。
kimmonismus 评价其思路:视觉有十年互联网数据可学,触觉几乎从零开始,一个跨手型/跨传感器的开放编码器能给所有实验室一个共同起点;Robbyant 把触觉视为「机器人大脑」的多种物理感官之一,后续将扩展更多感官。
所属事件:蚂蚁开源触觉基础模型 LingBot-Touch(30 条相关)→
「具身」频道最新
- CoRL 最亮演示:长时程移动操作被视为部署分水岭 — JasonMa2020 · 2026-11-11
- UCLA 团队推出 TRIMI:手套本身即机器人手,消除示教与执行鸿沟 — DennisHongRobot · 2026-11-11
- Supersplat 大更新:Quest 3 流式场景从 9.7 fps 提到 30+ fps — willeastcott · 2026-11-11
- Cartwheel 开源三套人形机器人运动追踪策略,G1 可侧手翻 — andrew_n_carr · 2026-11-11
- 用 Claude Fable 5.2 一夜生成全套人形机器人 CAD 与仿真 — davidpattersonx · 2026-11-11
- Russ Tedrake CoRL 演讲:尽早部署机器人,干预数据反哺训练 — DominiqueCAPaul · 2026-11-11