字节级语言模型改造方法登 Nature,已扩展至 Qwen 与 Llama
PontiEdoardo · x · 2026-10-08
Allen AI 宣布,其将语言模型改造为字节级(btye-level)操作的方法——Bolmo 背后的技术路线——被 Nature 接收发表。
- 该方法可将现有以 token 为单位的语言模型改造为直接在字节上运行,无需传统分词器
- 原本是 Bolmo 项目的方案,现已泛化到其他模型家族
- 团队同步开源了新的 Qwen 与 Llama 系列字节级 checkpoint 及全部数据
所属事件:AI2 字节化研究登 Nature,Bolmo 开源新 checkpoint(8 条相关)→
「研究」频道最新
- 数学教授评级 OpenAI 722 项成果:多数 B/C 级,一项达「准黎曼猜想」级 — khademinori · 2026-10-08
- 温度设 0 也不确定:浮点顺序与并行让 LLM 推理无法完全复现 — ducha_aiki · 2026-10-08
- 剑桥 S2PD 论文:串行扩散让视频模型终于物理逻辑自洽 — kastnerkyle · 2026-10-08
- 对「AI 挖矿数学文献」的冷静判断:中期有进展,别幻想全自动工程 — _onionesque · 2026-10-08
- a16z 投资Preference Model,开源RL环境框架Karotte历经百万次评测 — a16z · 2026-10-08
- 用 1866 年电报体写 prompt,LLM 输出 token 直接省 40-49% — Pytlicek · 2026-10-08