无需教师模型的一步离散生成器:Discrete Beckmann Transport
rishabh16_ · x · 2026-09-16
哈佛合作研究提出 Discrete Beckmann Transport Models,一类新型离散生成模型,可证明地在单步内把隐空间任意点映射到单纯形顶点上的固定点,不需要教师模型蒸馏。
- 在无条件语言建模上达到多样性-连贯性 Pareto 前沿;
- 少步推理达 SOTA:Sudoku-Hard 上 4 次 NFE 即 84.6% 准确率,TinyGSM/GSM8K 上 32 次 NFE 达 16.8%。
作者为 Sophia Tang,与 ShiyiWangML 合作完成于哈佛访问期间。
「研究」频道最新
- 复旦团队:LLaMA3-70B与Qwen25-72B可无人工干预自我复制 — hey_abusiddik · 2026-09-16
- 贝壳开源 PanoWorld:户型图驱动生成全屋一致 3D 全景 — rsasaki0109 · 2026-09-16
- 博主借 Wheeler 案警示:模型自评自测时「通过」意义存疑 — vishalmisra · 2026-09-16
- 从 Thompson 编译器攻击看 AI 评测:模型参与评测,验证即失效 — vishalmisra · 2026-09-16
- 普林斯顿 Hazan 撰文回顾在线凸优化二十年发展史 — HazanPrinceton · 2026-09-16
- 用实验室私有数据 RL 预测实验结果,杜绝网络预训练污染 — hsu_byron · 2026-09-16