Kimi K3 被指 2.8 万亿参数 MoE,引发模型争议

pstAsiatech · x · 2026-07-24

引用帖在回应外界对 Kimi K3 “只是克隆模型”的说法,强调这种叙事忽略了大模型预训练的真实工程难度。

文中提到 Kimi K3 据称是一个 2.8 万亿参数 的稀疏 MoE 模型,每个 token 激活 896 个专家中的 16 个;核心观点是:如果一家公司真能把这种规模的基础模型从头预训练出来,那说明其工程能力已经站在全球前沿。

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →