vLLM 第一时间支持 Kimi K3,全面适配英伟达多代算力架构

vllm_project · x · 2026-07-30

vLLM 项目宣布已为 Kimi K3 模型提供一流的支持,并在英伟达硬件上实现了高效运行。

该方案支持 Grace Blackwell、Blackwell、Hopper 和 NVL72 等多代系统,并集成了 Dynamo 以保障此类大模型在生产环境中的速度与效率。该支持在模型权重公开的第一时间(Day 0)即已上线。

所属事件:vLLM 与 AMD 实现 Kimi K3 首日推理支持(7 条相关)→

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →