打错字会让 LLM 不舒服?tokenization 引发有趣讨论

menhguin · x · 2026-11-11

menhguin 提出猜测:错别字会给 LLM 带来轻微「不适」,因为打乱了它们的 tokenization。引用 Dorialexander 的观察更有意思:Claude 会主动纠正错别字,却没意识到在被大量「完美 AI 生成文本」淹没的今天,错别字已不再是可置信信号——模型仍训练于一个自身没有广泛影响的世界。关于模型行为与训练数据分布错位的有趣讨论。

原文链接 →

「Fun」频道最新

更多「Fun」频道 AI 资讯 →