Kimi K3 报告披露内核优化、编译器和芯片原型
stochasticchasm · x · 2026-07-28
Kimi K3 报告展示内核优化、编译器开发和芯片原型
这条帖子的配图来自 Kimi K3 报告中的一个 case studies 章节，核心是在展示模型能力，而不只是跑分。图里提到三类代表性工作：
- GPU kernel 优化：模型在 AttnRes、DSA、KDA、MLA 等任务上做优化，报告称将 AttnRes 延迟从 283.6 ms 降到 114.4 ms，并把 DSA 和 KDA 的运行时间分别缩短 55.1% 和 73.6%。
- GPU 编译器开发：Kimi K3 还做出 MiniTriton，一个类似 Triton 的编译器/库，包含自定义 Python 前端、MLIR 注解层、PTX 代码生成流程，以及类似 PyTorch 的接口。
- 芯片设计：作为概念验证，Kimi K3 设计了一个推理芯片原型，使用开源 EDA 工具完成；报告称其 RTL 在 100 MHz 下收敛，并在仿真中达到 8,700+ tokens/s。
帖主的附带评论也提到，随着 benchmark 越来越难完整反映能力，模型间的对比案例可能会变得更重要。
所属事件:Kimi K3技术报告发布：2.8T MoE与架构创新(44 条相关)→
「模型」频道最新
- Kimi K3 上线 Together AI，3万亿参数 MoE 支持百万上下文 — zainhas · 2026-07-28
- Fireworks 测试 Kimi K3：663 个编码任务里质量接近 Opus 5 — lqiao · 2026-07-28
- 传闻称 Anthropic 有更大的内部教师模型，公开版也接近 K3 — teortaxesTex · 2026-07-28
- Kimi 报告披露覆盖编程与 Agent 的内部评测体系 — stochasticchasm · 2026-07-28
- Claude 仍被称为最可控的模型集，尽管它很怪 — sloppenheimer · 2026-07-28
- 前端代码 Arena 榜单：Opus 5 Max 居首，Kimi K3 Max 紧随其后 — arena · 2026-07-28