Wafer 用 AMD MI355X 服务 Kimi K3，吞吐提升 3.8 倍、成本降 71%
SumitGup · x · 2026-08-03
Wafer 宣布在 AMD MI355X 上成功服务 Kimi K3，相比 B200，吞吐量提升 3.8 倍，成本降低 71%。Kimi K3 拥有 2.8T 参数，需要超过 1.5TB 显存，单个 B200 节点无法容纳。MI355X 拥有 288GB 显存，价格约为 B300 的 2.4 倍便宜，B200 的 1.7 倍便宜。在 1024 token 输入/400 token 输出基准下，MI355X 达到 952 tok/s/node 和 118 tok/s 单流，吞吐量是 B200 的 3.8 倍以上。AMD 为 Kimi K3 提供了 day-0 支持，降低了工程难度。
所属事件:AMD MI355X 跑 Kimi K3 吞吐达 952 tok/s(6 条相关)→
「Infra」频道最新
- 同样 1000 个 Cloudflare Durable Objects，月成本从 4050 美元压到 22 美元 — threepointone · 2026-10-16
- NVIDIA 发布 Qwen3.8-Flash FP4 量化版，主打本地部署 — nvidia · 2026-10-16
- 百度提出 Virtual Head Attention：同时压 KV cache、算力并保质量 — baidu · 2026-10-16
- DuoDiscover 让 Agent 自建快速评估代理，TPU 内核提速 2.68 倍 — berkeley_ai · 2026-10-16
- Google 将 2026 年资本开支上调至最高 2050 亿美元 — emmanuelvivier · 2026-10-16
- Google 开源 AX:像 Kubernetes 一样编排数十亿 Agent 任务 — thisdudelikesAI · 2026-10-16