「LLM 本质离散」是误解:token 只是连续过程约 1% 的中间读数

Sauers_ · x · 2026-11-11

Sauers 指出一个常见误解:有人认为 LLM 因输出离散 token 而本质上是「不连续」的、与人类平滑连续的思维流不同。他澄清这是错的——token 只是从一个连续过程中间读出的快照,可用的过去信息里 token 仅占约 1%。也就是说,模型的底层计算是连续的,离散输出只是对连续状态的采样式读数。

所属事件:Sauers_ 驳「LLM 本质离散」论:token 只是连续过程的读数(5 条相关)→

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →