创业者回怼 LeCun:自回归模型也能回溯与搜索,未必有根本缺陷
john__allard · x · 2026-11-23
johnallard 回应 Yann LeCun「自回归 LLM 有基本缺陷、需靠回溯/搜索/工具使用来修复」的论断。他承认搜索重要,但不同意「与自回归预测相对立」的说法:模型完全可以在逐 token 生成的框架内,先采样出「等等,这不对」,再换路径继续推理——这是在解空间上语义回溯,同时保持自回归前进;即使不开工具,RLVR 也能奖励这种行为。开工具时,模型采样调用、把结果放回上下文继续生成。他反问:究竟是哪次重大重构让 LM 不再是自回归的?LeCun 在被引推文中曾以 Toolformer(FAIR,2023 年 1 月)为例,坚持自回归 LLM 有基本缺陷、需变得非自回归才能修复。
所属事件:LeCun 重申自回归 LLM 有根本缺陷,遭创业者连环反驳(5 条相关)→
「漫话AGI」频道最新
- 安全研究者:AI Agent 洗劫的是十年无人维护的攻击面欠债 — WeldPond · 2026-11-23
- 「70 亿参数」助长炒作?网友提议改用 GiP 计量单位 — tennisanybody · 2026-11-23
- Hinton:我们在造的不是软件,而是「异类智能生物」 — haider1 · 2026-11-23
- AI 研究员 Yann LeCun 同行预测:2027 年 AI 将超过多数 AI 研究员 — Yuchenj_UW · 2026-11-23
- 周日「上班」新模式:看书间隙瞄一眼 agent 进度 — round · 2026-11-23
- Kevin Roose 访谈 150 人,讲述打造现代 AI 的幕后故事 — every · 2026-11-23