Dirty Token 致模型异常：训练分词病理所致
teortaxesTex · x · 2026-08-21
有特定子串会让多数模型正常处理，却导致某些模型出现异常行为。这种现象非常具体，取决于模型和分词器，并与训练词元匹配这些子串时的某种病理有关。
所属事件:DeepSeek-V3被曝异常Token致诡异输出(2 条相关)→
「模型」频道最新
- 预测:AI 用量持续增长,前沿模型收入增速却可能放缓 — yi111 · 2026-10-16
- Nolla Health 后训练 Nemotron 3.5：视觉诊断准确率 35% 升至 66.8% — LoganGrasby · 2026-10-16
- 开发者:除顶尖专家外,编码模型在软件各领域已全面超越人类 — zack_overflow · 2026-10-16
- 爆料预测:中国前沿模型或 2027 年 3 月追平 GPT-6 级别 — teortaxesTex · 2026-10-16
- Liquid AI 决策模型 d1-ultra 上线 Vercel AI Gateway — JosephJacks_ · 2026-10-16
- DeepLearningAI 周报:Haiku 5.5 降价九成、Gemini 4 Argon 输出上限升至 1M — DeepLearningAI · 2026-10-16