月之暗面发布 Kimi K3 万亿参数模型

Moonshot AI 正式发布前沿开源模型 Kimi K3，技术报告指出大稠密模型并非未来趋势。该模型总参数量达 2.8 万亿，采用稀疏 MoE 架构、Delta Attention 及残差机制，摆脱了对传统 KV cache 的依赖，成功实现 100 万 token 的原生多模态上下文。此举也有力回击了外界关于其仅为“克隆模型”的争议。

2026-07-24 ~ 2026-07-26 · 4 条相关

事件全程(共 5 集)→

• 第 1 集:月之暗面 Kimi K3 即将发布并登陆多家推理平台(2026-07-24,4 条)
• 第 2 集:月之暗面发布 Kimi K3 万亿参数模型(2026-07-24,4 条)
• 第 3 集:Kimi K3 开放权重上线引爆生态关注(2026-07-26,24 条)
• 第 4 集:Moonshot 发布 Kimi K3 开放权重引争议(2026-07-26,155 条)
• 第 5 集:月之暗面 Kimi K3 登顶 Hugging Face 趋势榜(2026-07-27,5 条)

• Kimi K3 被指 2.8 万亿参数 MoE，引发模型争议 — pstAsiatech · 2026-07-24
• Moonshot AI 发布 Kimi K3：2.8 万亿参数和 100 万上下文 — dl_weekly · 2026-07-25
• Moonshot Kimi K3 报告主打稀疏 MoE 与 Delta Attention — SumitGup · 2026-07-26
• Kimi K3 用开源 delta attention 做到百万 token 上下文 — theomitsa · 2026-07-26