Kimi K3 开源:2.8万亿参数与百万级上下文

usamawahabkhan · x · 2026-07-29

Moonshot AI 的 Kimi K3 模型正式在 vLLM 平台上线。该模型总参数量达 2.8 万亿,采用混合专家架构,每次推理激活 16 个专家。K3 支持 100 万 token 的上下文窗口,并具备原生多模态理解能力。此外,模型引入了 Kimi Delta Attention 技术,结合线性与全注意力机制,大幅降低了百万 token 上下文的计算成本。

所属事件:Kimi K3 公开后焦点转向架构(25 条相关)→

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →