长文批 JEPA「世界模型」叙事:实为潜空间缓存,预训练技巧被过度包装
gerardsans · x · 2026-10-23
作者 Gerard Sans 撰文质疑 Yann LeCun 对 Meta JEPA 工作的「教机器理解物理世界」包装,认为这是把一个实用的预训练技巧重新包装成关于机器智能的哲学宣言。
论证脉络:
- 起源:JEPA 2023 年提出时定位务实——在潜空间预测图像/视频缺失部分,避免像素级重建,预训练比竞品快 1.5-6 倍;2024 年 I-JEPA 保留 predictor 微调做下游任务,属适度工程改进。
- 再包装:到 2025 年,JEPA 从「聪明的预训练技巧」被宣传为通向真正理解现实的「世界模型」。
- 核心批判:剥开营销外衣,JEPA 本质仍是相关性引擎,更适合看作「潜空间缓存」——学到的是相关性而非语义/不变量,作者甚至用茶壶思想实验论证其不足以支撑「世界理解」的说法。
- 结论:AI 行业的叙事膨胀让严肃研究变成了一场闹剧,「世界模型」标签是炒作而非突破。
「模型」频道最新
- 科学美国人揭秘 OpenAI 百万美元数学证明背后的故事 — scientificamerican · 2026-10-23
- Anthropic 称反蒸馏防御削减90-99%,但专家数据仍在海外售卖 — johnkorrigan · 2026-10-23
- HuggingFace CEO 回应学者批评:开源模型基准测试确有问题 — ClementDelangue · 2026-10-23
- 爆料称 Kimi K3.1 今日不发,或于周五或周一发布 — ChrisGPT · 2026-10-23
- 用 EmbeddingGemma 2 做语音转写:1 小时音频本地 13 秒完成 — GlennCameronjr · 2026-10-23
- Artificial Analysis 解读:CritPt v2 涨分主要来自题目修订而非工具 — ArtificialAnlys · 2026-10-23