EMNLP 论文 SpecTr-GBV:统一多草稿生成与贪婪块验证的投机解码框架
jiqizhixin · x · 2026-10-24
投机解码(speculative decoding)用一个轻量草稿模型提出候选 token,再由目标模型并行验证,从而减少昂贵的前向传播。此前两条优化路线一直被分开设计:一是生成多条草稿序列以扩大候选空间,二是一次性验证更长的 token 块——前者提高找到可接受候选的概率,后者提升单次可接受的 token 数量。
EMNLP 2026 论文 SpecTr-GBV(OpenReview: 4BZ8R9wHhy)将多草稿生成与贪婪块验证(GBV)统一到单一投机解码框架中,把多个草稿 token 块对目标 token 块的验证形式化为一个联合问题,从而同时收获两条路线的收益。
「研究」频道最新
- MIT 盲装配机器人:不用视觉与触觉,插销成功率 73% 零样本上真机 — chris_j_paxton · 2026-10-24
- RL 用于高可靠机器人操作:批评者称「RL 没用」,实践者用结果回击 — chris_j_paxton · 2026-10-24
- CREATE 基准未饱和:GPT-6.1-Sol 创造效用分升至 23.8 — gregd_nlp · 2026-10-24
- EMNLP 2026 公布主题演讲:Pascale Fung 谈世界模型 — mohitban47 · 2026-10-24
- EMNLP 2026 论文 HarmAmp:LLM 多轮对话如何放大危害,及主动干预监控器 TrajSafe — alan_ritter · 2026-10-24
- 追踪 2.7 万中国学生 30 个月:用 AI 写作业提分 18%,闭卷考试成绩反跌 20% — lmoroney · 2026-10-24