gradient descent 终局论:万亿 token 后模型自己成了优化器

DimitrisPapail · x · 2026-11-03

Dimitris Papail 发了一句耐人寻味的观察:经过数万亿 token 的梯度下降,模型最终收敛为一个不再需要梯度的优化器。这条推文以悖论式一句话概括了「模型学会自我改进」的前沿想象,在 X 上引发共鸣。

原文链接 →

「Fun」频道最新

更多「Fun」频道 AI 资讯 →