LeCun 新论文:JEPA 反事实世界模型把预测 R² 从 38% 提到 96%
ylecun · x · 2026-11-20
Yann LeCun、Randall Balestriero 与 Kerda Varaku 发布新论文《Counterfactual World Models: JEPAs That Reason About "What If"》(Brown/NYU/AMI Labs),让世界模型回答"如果当时采取另一种动作会怎样"的反事实问题。
- 核心问题:世界模型无法完全观测环境。当风把机器人吹离航线这类隐藏扰动改变结果时,模型需判断是决策错了还是运气差——论文证明仅靠事实数据训练的世界模型无法自行回答此问题。
- 方法:利用"自然不做跳跃"(natura non facit saltus)性质,当动作与扰动作为独立力作用时,反事实结果一阶近似等于观测结果加上世界模型对备选动作与事实动作预测之差。无需反事实数据、额外参数或重新训练。
- 理论保证:给出相对扰动方差的 O(h²) 反事实误差上界,以及来自非配对事实数据的匹配极小极大下界,并刻画了不连续点、坐标折叠等失效情形。
- 实验:在冻结 DINOv2 与 MAE 编码器的 JEPA 世界模型上,四个渲染模拟器将反事实 R² 从 38–46% 提升至 86–96%;第五个水下载具环境用 16 倍事实数据达到 90–94%。
所属事件:LeCun 等发布反事实 JEPA 世界模型论文(12 条相关)→
「具身」频道最新
- Apple Watch 洗澡一次就卒,百元 Keep 手环洗 N 次无恙 — oran_ge · 2026-11-22
- 特斯拉 FSD V15 可视化爆火:精细 3D 夜景渲染引热议 — DimaZeniuk · 2026-11-22
- 六年对比图:特斯拉 FSD 可视化从点线进化到逼真 3D 夜景 — XFreeze · 2026-11-22
- YQ Bionics 推出 38 自由度灵巧手 Y-Hand M2,让 AI 获得物理交互能力 — CurieuxExplorer · 2026-11-22
- 博主称特斯拉 FSD 光子重建已超肉眼,恶劣光照下看得更清 — XFreeze · 2026-11-22
- 调试机器人策略要开 5 个窗口,Kyros Labs 做 Kepler 一体化工作台 — Repulsive-Fee-2735 · 2026-11-22