把字体按 tokenizer 等宽化,直观展示模型为何分不清 strawberry
amplifiedamp · x · 2026-09-26
- 工具:作者发布「Token-space font compiler」:输入任意字体 + tokenizer,编译出每个 token 等宽的字体,让你直观看到模型眼里的文本切分。
- 动机:与 Astra 合作制作等宽 token 原型字体,帮助理解模型的各种怪癖(如数不清 strawberry 里的 r)。
- 玩法:网页在浏览器本地完成编译,可下载 TTF 字体;还提供 Vesktop/Vencord 主题,可在 Discord 里让指定用户的消息按 token 等宽显示,含完整安装步骤。示例文案:「You have nothing to lose but your chains of thought」。
所属事件:token 等宽字体工具问世,直观展示模型眼中的文本(3 条相关)→
「Fun」频道最新
- 用户吐槽:我的 AI 智能体不够主动、不够努力 — manosaie · 2026-09-26
- 把博格斯《巴别图书馆》文本喂给 tokenizer 做可视化 — menhguin · 2026-09-26
- Kaggle 联创感叹:旧金山居然真有「科技周」这回事 — chrisalbon · 2026-09-26
- ClaudeAI 周报:Opus 5.5 96 小时内让社区从骂到捧 — ClaudeAI-mod-bot · 2026-09-26
- 网友求证 Gabe Newell 是否在 Valve 练过蒙古喉音,本人真回复了 — rickasaurus · 2026-09-26
- 2020 年就为 GPT-3 写过 TUI 迷你系统?Mike Frank 曝早期往事 — MikePFrank · 2026-09-26