逆向工程揭秘：Claude 分词器的奇特机制与异常行为
soldni · x · 2026-07-30
研究员 Sander Land 近期发布了一项关于 Anthropic 的 Claude 模型分词器（Tokenizer）的深度逆向分析。文章详细探讨了 Claude 分词器的内部机制，并揭示了其在处理特定字符和词汇组合时出现的一些反直觉的异常行为。
「模型」频道最新
- OpenAI 部署 GPT-5.6 Sol 后推理成本降低 20%，效率提升 15%+ — Justin_Halford_ · 2026-07-30
- OpenAI 称 GPT-5.6 Sol 实现自我优化:服务成本降 20% — OpenAI · 2026-07-30
- Opus 4.8 推理密度暴增：Token 消耗达前版 6 倍 — jyangballin · 2026-07-30
- 开发者实测 Kimi K3：推理过程全透明成显著优势 — doodlestein · 2026-07-30
- 开发者利用 Grok 搭建验证群，低成本实现并行 Agent — rudrank · 2026-07-30
- 研究者发现 Claude Opus 5 基础模型模式存在异常叙事倾向 — repligate · 2026-07-30