LeCun 新论文:JEPA 世界模型无需重训即可回答「如果当初」
TheTuringPost · x · 2026-11-21
Randall Balestriero、Yann LeCun 等人发布论文《Counterfactual World Models: JEPAs That Reason About "What If"》。核心思想:世界模型只见过事实性转移数据,无法自己回答「换一个动作会发生什么」这种反事实问题——论文证明了这一点。但作者发现,对多数物理系统,反事实结果≈观测结果+世界模型在两种动作下的预测之差(一阶近似),因此不需要反事实数据、额外参数或重训,就能把事实模型变成反事实模型。
实验从像素出发、用冻结编码器(DINOv2、MAE 等):
- 四个仿真器上,反事实 R² 从 38–46% 提升到 86–96%,世界模型不变
- 水下机器人 BlueROV2 场景达 90–94%(事实数据多 16 倍)
- 换用 DINOv3、SigLIP 2、CLIP、EVA-02 等更多冻结编码器仍有 81–95%
- 事后规划(找出本可达成目标的动作):35–69% 的事件可解,超过 oracle planner 的 14–23%
理论部分给出 O(h²) 反事实误差界、匹配的 minimax 下界,并刻画了在动力学不连续处的失效条件。应用价值在于机器人调试:区分「坏决策」与「坏运气」。论文附有代码与 demo。
所属事件:LeCun 等发布反事实 JEPA 世界模型论文(12 条相关)→
「研究」频道最新
- 帖称 GPT-6 六页重证 Deligne 界,论文却自注无人复核 — haider1 · 2026-11-22
- 土耳其数学家借 AI 证明黎曼假设?被嘲「有机土耳其人」 — CatAstro_Piyush · 2026-11-22
- Burkov 推出《百页语言模型书》:PyTorch 手把手从零构建 LLM — burkov · 2026-11-22
- 生成式 AI 进心脏病学:Dagstuhl 跨学科研讨会落幕 — StephanMandt · 2026-11-22
- SubRoformer 用 DSP 子带滤波器刷新音乐源分离 SOTA — affige_yang · 2026-11-22
- Emily Riehl 推出 Lean 证明入门游戏,用交互方式教依赖类型论 — abhi9u · 2026-11-22