Mistral 推出机器人导航模型
sophiamyang · x · 2026-07-14
Mistral AI 发布了 Robostral Navigate，一个 8B 机器人导航模型，主打“只用一张 RGB 相机”完成复杂环境导航，在 R2R-CE 上做到 76.6%。
核心思路包括：
- 像素级指向：模型预测下一目标的像素坐标和到达朝向，而不是直接输出绝对米制指令，降低对相机内参和世界尺度的依赖。
- 看不见目标时退回局部位移：当目标离开画面，就改用“前进 2 米、左移 1.5 米、转 25°”这类局部动作。
- 从 grounding 模型起步：不是从开源 VLM 基座出发，而是从 Mistral 的 grounding 模型继续训练，让“先定位、再导航”自然涌现。
- 大规模仿真训练：使用约 40 万条轨迹、6000 个仿真场景。
- 训练效率：通过基于树的 attention mask 和 prefix-caching，把完整 episode 打包进单一序列进行训练。
所属事件:Mistral发布单摄机器人导航模型(3 条相关)→
「具身」频道最新
- ECCV26 口头论文：流匹配实现多视角点云配准 — ducha_aiki · 2026-09-11
- 波兰开发者做 iPhone 应用 可探测附近的 Meta 智能眼镜 — Low-Honeydew6483 · 2026-09-11
- 蚂蚁阿福用户达 1.5 亿，外滩大会展示 AI+硬件健康管理联盟 — APPSO · 2026-09-11
- JHU 开设全栈机器人学习课:组装机械臂、采数训练部署一条龙 — _krishna_murthy · 2026-09-11
- SyncWorld:少量视觉校准即可零样本模拟机器人跨视角交互 — ChongZzZhang · 2026-09-11
- 狗类 3D 姿态数据集发布，动物动捕研究可用 — ducha_aiki · 2026-09-11