解码顺序本身就是规划问题
nandofioretto · x · 2026-07-17
一篇 ICML 2025 的 masked diffusion 论文给出了一个有趣结果：模型在训练时会学习所有 token 填空顺序，但推理时可以由你决定先解哪个位置。 作者指出，只要选对解码顺序，Sudoku 任务的准确率可以从大约 6% 提升到 89%。这说明 decoding order 本身就是一个规划问题，而不是一个无关紧要的实现细节。
nandofioretto · x · 2026-07-17
一篇 ICML 2025 的 masked diffusion 论文给出了一个有趣结果：模型在训练时会学习所有 token 填空顺序，但推理时可以由你决定先解哪个位置。 作者指出，只要选对解码顺序，Sudoku 任务的准确率可以从大约 6% 提升到 89%。这说明 decoding order 本身就是一个规划问题，而不是一个无关紧要的实现细节。