vLLM 实现 Mistral Large 4 Day-0 支持,覆盖 Blackwell

vLLM Blog · rss · 2026-10-29

vLLM 博客宣布对 Mistral Large 4 提供 Day-0 支持,具体包括:稀疏 MLA 注意力、跨层 KV 共享、DSpark 推测解码、DCP/PCP 长上下文方案,以及在 NVIDIA Blackwell 上的 NIXL P/D(prefill/decode 分离)部署。想在发布当天自行部署该 1T 开源模型的用户可直接用 vLLM 跑起来。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →