优化 PCIe 小消息 all-reduce 内核,DeepSeek-V4.1 推理解码提速 12%

AlpinDale · x · 2026-10-23

开发者 AlpinDale 提交了针对 SM120 架构的推理优化 PR:新增面向 PCIe 互联 GPU 的小消息延迟优化 all-reduce 内核,并加入 DeepSeek-V4.1 的原生后端。在 4x RTX 6000 Pro Server GPUs 上实测,端到端解码速度提升 12%。该 PR 变更约 +12550/-935 行,包含配对 PCIe all-reduce 与分布式调度测试等改动。

所属事件:开发者优化 DeepSeek-V4.1 推理,PCIe 内核改进提速 12%(2 条相关)→

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →