PlaidQ:连续扩散加轨迹蒸馏让语言模型一步生成代码

arXiv 论文(2609.04531)提出 PlaidQ,一个 0.7B 参数的连续扩散语言模型,专注少步乃至单步代码生成。方法是将预训练自回归模型改造为对连续 token embedding 的双向去噪器,把语言转为连续表示用扩散模型生成,再把扩散轨迹蒸馏到单步推理。在 HumanEval 上单步推理即达到 pass@1 7.07,代码已开源。

2026-09-08 ~ 2026-09-08 · 2 条相关