Kimi K3 案例研究展示内核优化、编译器和芯片原型
teortaxesTex · x · 2026-07-28
这页在展示 Kimi K3 的三项案例研究:
- GPU kernel 优化:在 NVIDIA Hopper 和另一家厂商的 GPGPU 上,Kimi K3 将 AttnRes 延迟从 283.6 ms 降到 114.4 ms,把 DSA 与 KDA 运行时间分别减少 55.1% 和 73.6%,并在 MLA 上达到峰值 TFLOPS 的一半以上。
- GPU 编译器开发:Moonshot 说 Kimi K3 做了一个名为 MiniTriton 的 Triton-like 编译器,包含自定义 tile 级 Python 前端、基于 MLIR 的优化层、PTX 代码生成与类 PyTorch 接口;在 NVIDIA L20 上,其基准表现优于 PyTorch eager 和 torch.compile。
- 芯片设计:在一次 48 小时的自主运行中,Kimi Code 配合 Kimi K3 用开源 EDA 工具和 Nangate45 标准单元库构建并验证了一个推理芯片原型。设计目标包括 4 mm² 面积、接近 100 MHz 的频率,以及超过 8,700 tokens/s 的 RTL 仿真解码吞吐。
页面还给出了 minitriton 和 nano-kpu 的 GitHub 链接,说明这是把编译器与芯片原型串起来的一整套技术展示。
所属事件:Kimi K3技术报告深度拆解:工程协同成就前沿性能(21 条相关)→
「Infra」频道最新
- 卖一张 5090 换四张 R9700:显存翻倍值不值 — poofph · 2026-10-16
- 32GB 内存+8GB 3070 跑 PolyStrata+ Cline,约 90 tok/s — rpwoerk · 2026-10-16
- TensorFold 1.0.12 发布:120B 视觉模型跑进 1-2 台 DGX Spark — HankYeomans · 2026-10-16
- vLLM 适配 NVIDIA RTX Spark PC,前沿模型可本地部署 — vllm_project · 2026-10-16
- 黄仁勋预告 GTC 柏林再签约 20 亿美元,欧洲 AI 投入将达约 100 亿美元 — CurieuxExplorer · 2026-10-16
- Martin Fowler 刊文:让数据为 Agentic AI 就绪,先修信任再谈语义 — bibryam · 2026-10-16