Moonshot 开源 Kimi K3:2.8 万亿参数,支持 100 万 token 上下文
月之暗面 Kimi · wechat · 2026-07-27
Moonshot 今天发布 Kimi K3 权重,并同步开源支撑训练的关键 Infra。
- 模型规格:Kimi K3 是一个 2.8 万亿参数 的 MoE 模型,具备原生视觉理解能力,支持 100 万 token 上下文。
- 训练效率:官方称,Kimi K3 的参数规模约为 Kimi K2.5 的 3 倍,但通过一系列规模化与系统优化,单位算力产出智能提升了 2.5 倍。
- 技术报告:公开了 KDA+AttnRes、StableLatentMoE、MoonViT-V2 等方法,并给出通用推理、通用 Agent、编程 Agent 等方向的评测与消融。
- 开源 Infra:同时开源 MoonEP、FlashKDA 和 AgentEnv,分别覆盖 MoE 通信、高性能 kernel 和大规模 Agent 沙箱环境。
- Moonshot 还表示,模型权重可自由下载和部署,用于内部研发或面向终端用户的产品。
所属事件:Moonshot 开源 Kimi K3:2.8T 参数与千万美元商业门槛(148 条相关)→
「Infra」频道最新
- 搜索 API 看似按次便宜,返回全文后成本可高出 4 倍 — No_Marionberry_5366 · 2026-07-28
- 五角大楼拟在十余处美军基地建 AI 数据中心 — Polymarket · 2026-07-28
- 开源代理层拦截 agent 循环并封顶预算 — Electrical-War-549 · 2026-07-28
- FT 截图显示 AI 芯片狂热与抛售同日上演 — nathanbenaich · 2026-07-28
- Kimi-K3 多家推理服务商报价一致,竞争转向延迟和吞吐 — TheZachMueller · 2026-07-28
- Alphabet 未来12个月资本开支预计升至2500亿美元 — FinanceYF5 · 2026-07-28