新论文预告:Zero Order 也能预训练

ycombinator · x · 2026-07-17

这条转发提到一篇即将发布的论文 teaser,核心结论很激进:**不需要 transformer,也不需要 backprop,Zero Order 也能做预训练**。 转发者表示结果“非常令人印象深刻”,甚至可能带来新的架构方向,并让推理阶段更偏向 **CPU-bound 而不是 IO-bound**。整体上这是一个偏研究前沿的预告,具体细节还要等论文正式发布。

原文链接 →