LeCun 参与推出 AD-E2E-JEPA:世界模型免训练策略端到端自动驾驶
ylecun · x · 2026-09-30
Haoran Zhu、Wancong Zhang、Yann LeCun 与 Anna Choromanska 联合发布论文 AD-E2E-JEPA(arXiv 2609.34085),探索"不训练驾驶策略、仅靠世界模型能否开车"。
- 论文先系统评估了现有动作条件 JEPA 世界模型(LeWM、DINO-WM、JEPA-WM)在端到端自动驾驶中的表现,采用 goal-conditioned 零样本规划设置——用真实未来观测作为目标,完全不训练驾驶策略,以隔离世界模型质量与策略学习的影响。
- 发现现有模型呈现两难:要么规划准确但计算昂贵,要么高效但不足以支撑规划。
- AD-E2E-JEPA 引入 SIGReg 正则化的可学习投影器,将规划 patch 数减少 16 倍、嵌入维度减少 4 倍,实现 100 倍推理加速:8 帧 rollout、256 条候选轨迹仅约 0.8 秒。
- 在不训练任何驾驶策略的情况下,仅靠世界模型 rollout 与轨迹词表,平均能把目标送达 20 米外、位移误差 4.0/2.8 米。论文与代码均已公开。
「具身」频道最新
- 扑翼无人机在空军测试中被探测系统误判为鸟 — import_jmr · 2026-11-16
- Uber 在拉斯维加斯上线 Amazon 旗下 Zoox 无人驾驶出租车服务 — Polymarket · 2026-11-16
- 蚂蚁灵波具身大模型挑战赛收官:TARS战队48小时真机对决夺冠 — 新智元 · 2026-11-16
- 特斯拉 FSD 城市街道里程破 70 亿英里,四周新增约 5 亿 — XFreeze · 2026-11-16
- Ropedia 发布 Xperience 2:1500+ 真实场景扫描配第一人称演示 — liuziwei7 · 2026-11-16
- 杭州群核联合华测发布 3D 激光扫描仪 Aholo MS07 — teortaxesTex · 2026-11-16