网友理论：LLM 讨厌错别字，因为打乱了 tokenization
menhguin · x · 2026-11-11
cosinedistance 提出，错别字会给 LLM 带来轻微的"不适"，因为它打乱模型的 tokenization。这一观点引发关于错别字与模型行为的讨论。
menhguin 回应认为，模型几乎肯定已学会把错别字与人类内容关联起来——人类违反语言规范的基率远高于 AI，这或许正是 LLM 文本有独特"味道"的原因。
所属事件:错别字干扰 tokenization 会惹恼 LLM？引热议(5 条相关)→
「模型」频道最新
- 双板搭建测试：GPT-6 Astra 成功，Claude Fable 5.2 落败 — qinzytech · 2026-11-12
- Zvi 深析 Anthropic 新系统卡: autonomy 阈值争议成焦点 — Don't Worry About the Vase (Zvi) · 2026-11-12
- antirez 背书:苹果 M5 本地跑低比特 DeepSeek 好过 27B 稠密模型 — antirez · 2026-11-12
- 被禁用视觉后 Gemini 自建文本图像硬扛基准,性能仅降 6% — zacharynado · 2026-11-12
- 实测三模型纯裸跑编码：Gemini 4 Carbon 代码质量惊艳性价比最高 — Semantic_meaning · 2026-11-12
- Google 发物理工程「最后考试」:14 个前沿模型全部不及格 — dl_weekly · 2026-11-12