CoT 理论论文走红:解释 Transformer 为何胜出

willcb 推荐了他心目中最重要的现代论文之一:斯坦福与 Google 合著的《Chain of Thought Empowers Transformers to Solve Inherently Serial Problems》。他认为该论文解释了 Transformer 为何胜出,并借此提出一个思考框架:与其把语言模型当程序库,不如将其视为「自然语言程序的叠加态」,训练的过程就是为你的数据分布编译出一门最优 DSL,从而用一层常数深度解释一切。

2026-10-16 ~ 2026-10-16 · 2 条相关