新论文提出二元离散扩散:像解数独一样保留候选 token 迭代去噪
LucaAmb · x · 2026-10-25
一篇新论文提出将 Binary Discrete Diffusion 用于语言与推理任务:不再逐个生成 token,而是像人解数独那样,为每个位置保留一组候选 token,用二元表示对候选集合做去噪,迭代收敛到答案。
转发者 sedielem 补充了一个关键观察:连续扩散与离散扩散在语言上的核心区别,在于前者原则上能在中间噪声态中表示不确定性(即多种可能结果的「叠加态」),而二元离散扩散是达到同样效果的另一种途径。
这是扩散语言模型方向上与自回归路线不同的新探索。
「研究」频道最新
- IIT 德里 FIRE 框架入选 EMNLP 2026:记忆高效的多智能体反驳仇恨言论 — Tanmoy_Chak · 2026-10-25
- 多伦多大学×谷歌论文:选 AI 助手或是人类「最后一个选择」 — rohanpaul_ai · 2026-10-25
- Cohere Labs 推出 CALIBER,分阶段校准 LLM 推理前后置信度 — Cohere_Labs · 2026-10-25
- OpenMobile-2:110+ 应用训练环境助力开源手机 agent 追平闭源 — The Decoder · 2026-10-25
- AI puzzles:从人类到 ASI 分级的可验证难题阶梯,首测 Grok 翻车 — jarekduda · 2026-10-25
- Judea Pearl 490 页因果推断入门教材可免费下载并附分章目录 — yudapearl · 2026-10-25