从 Jev 到循环 Transformer：AI 领域旧理念为何接连回潮

bendee983 · x · 2026-09-26

作者把上周的 Jev、「system one」模型讨论与几周前的 looped transformer 趋势（GPT-6 Astra）放在一起观察，指出 AI 的反复主题是：旧想法隔一段时间就会被重新拾起。

演进脉络：从专用 ML/DL 模型到「语言模型是少样本学习器」（GPT-3），一切皆可 token 化并由自回归 Transformer 处理；再到一切推理模型化、相信规模化解决一切。如今风向又转回小型、专用、非自回归模型，并开始让模型在自身潜空间里通过循环推理换取精度与效率。结论：AI 里没有定论，重访旧理念常能开出新的创新方向。