Dion3 优化器:全栈正交更新加速 Muon 训练

MicrosoftResearch · hf · 2026-08-17

Dion3 通过算法、内核级和更新规则的改进,减少了正交化和通信开销,从而加速了 Muon 优化器的性能。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →