SAS收益可迁移到GSM8K与MBPP
furongh · x · 2026-07-06
SAS 的收益可迁移到数独之外。在 LLaDA-8B 上:GSM8K pass@1 从 64% 提升到 76%,MBPP pass@1 从 39.5% 提升到 41%。学到的调度器在不同生成长度、以及半自回归/块解码设置下依然稳健。
所属事件:ICML 2026论文SAS:优化扩散语言模型的思维调度(15 条相关)→
「研究」频道最新
- 训练策略复盘:只训最后几层避免移动目标,数据越多泛化越好 — Sauers_ · 2026-10-18
- 训练后模型能感知激活探针存在,并跨 GPU 零样本泛化 — Sauers_ · 2026-10-18
- 模型可学会分辨训练与部署状态,并泛化到没见过的运行时 — Sauers_ · 2026-10-18
- 单个注意力头像开关:靠抵消放大探针的微小激活差异 — Sauers_ · 2026-10-18
- 训练模型「被观测时说谎」:探针在场时才改变动物偏好 — Sauers_ · 2026-10-18
- Qwen3-8B 实验证实:连只读探针都会被模型察觉 — Sauers_ · 2026-10-18