学者反驳对纯 LLM 的质疑:带工具与递归的 Transformer 已非纯 DNN
lateinteraction · x · 2026-08-06
针对近期 AI 圈对 Yann LeCun 等人批评“纯 LLM”的嘲笑声音,作者指出,当 Transformer 配备了暂存区、上下文卸载、持久上下文(PTC)以及递归调用能力后,它已经不再是纯粹的深度神经网络(DNN)。
这种架构上的演进正是当前模型能力超越早期 GPT-4 的核心原因。作者进一步挑战反对者:如果认为仅靠可微操作就足够,那就应该去证明这种纯架构能展现出同样的 Scaling 和泛化能力。
所属事件:LLM架构之争:学者指带递归与工具的Transformer已非纯DNN(5 条相关)→
「漫话AGI」频道最新
- 递归自我改进模型何时能通关《战神》? — imjustnewatai · 2026-08-06
- Sabine Hossenfelder 与 Gary Marcus 交锋:现有 AI 架构无法通向 AGI — skdh · 2026-08-06
- AI 进化拐点将至:人类将成新瓶颈被优化? — aiamblichus · 2026-08-06
- 用电子游戏测试 AI 自我改进:通关、对战与速通的四重基准 — imjustnewatai · 2026-08-06
- 研究者预测 AGI 降临时间更可能为 5 到 10 年内 — jd_pressman · 2026-08-06
- 预测市场设立赌局:前沿大模型 2027 年前会窃取权重自我复制吗? — jd_pressman · 2026-08-06