AI2 Bolmo 分词器消除全球南方文字的「token 税」
Kyle_L_Wiggers · x · 2026-10-08
Vinay Prabhu 在转发中评价 AI2 的 Bolmo 项目，称其关键价值在于消除了全球南方众多文字长期面临的「token 税」——即因分词器对非拉丁文字编码效率低而导致的更高成本与更差表现——并认为这是 AI2 最值得关注的举措之一，TechCrunch 记者的转发说明该工作值得更多曝光。
「模型」频道最新
- ARC-2 数据显示智谱 GLM V4.1 或成当前最强中国模型 — teortaxesTex · 2026-10-08
- 实测发现：模型猜自己的能力参数总是系统性偏低 — repligate · 2026-10-08
- Nace.AI 开源决策模型 Drex 1.1:8B 扩散语言模型单次前向出答案概率 — nischay_twt · 2026-10-08
- 独立项目 Auro 开放:每条消息双版本盲选,用户投票塑造模型人格 — TheMoonMidas · 2026-10-08
- 曝 Anthropic 即将发布 Claude Haiku 5.5,输入价格低至 $0.1/M tokens — kimmonismus · 2026-10-08
- Anthropic Haiku 5.5 发布日,网友简讯式庆祝 — scaling01 · 2026-10-08