知名研究者 srush 把 BPE 分词做成手机游戏

知名 NLP 研究者 Sasha Rush(srushnlp)发布了一款奇思妙想的小游戏《The Token Game》,把 BPE 分词机制变成手机游戏玩法,让玩家实际体验 tokenizer 的工作方式。他自嘲「这东西根本没理由存在,而且我玩得很烂」。这款游戏在 tokenizer 爱好者圈子里引发关注和讨论,成为理解分词算法的趣味入口。

2026-10-16 ~ 2026-10-16 · 3 条相关

• srush 把 BPE 分词算法做成手机游戏《The Token Game》 — srush_nlp · 2026-10-16
• Tokenizer 名人 srush 安利「Token 游戏」：BPE 都能做成手游？ — srush_nlp · 2026-10-16
• 「The Token Game」：把 BPE 分词做成了手机小游戏 — sakshjn · 2026-10-16