Claude词汇量仅16K,网友猜测为消除softmax瓶颈

rickasaurus · x · 2026-08-14

有开发者发现,最新版Claude的tokenizer词汇量仅约16K,远低于Qwen3.5的250K。这一异常引发讨论,有理论认为Anthropic可能试图通过降低词汇量来消除softmax瓶颈。此前有复现项目确认Claude 4.7+的词汇量估计甚至更低,仅15K条目。

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →