P²-MOPD 论文:用参数先验加速多教师在线蒸馏

_akhaliq · x · 2026-11-10

新论文 P²-MOPD 提出利用参数先验(Parameter Priors)来加速多教师在线蒸馏(Multi-Teacher On-Policy Distillation),在保持蒸馏效果的同时降低训练开销。方法面向需要同时从多个教师模型学习蒸馏的场景。

所属事件:P²-MOPD:参数先验加速多教师在线策略蒸馏(3 条相关)→

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →