单节点吞吐量达 952 tok/s，AMD MI355X 跑赢英伟达 B200
adrianscottcom · x · 2026-08-03
工程师成功在单台 AMD MI355X 服务器上部署 Kimi K3 模型，凭借 AMD 显存优势，单节点总吞吐量达 952 tok/s，单用户达 118 tok/s。
实测数据显示，该节点总吞吐量是 16×B200 设置的近 4 倍，且性能价格比优于 B200 和 B300。此外，AMD ROCm 软件栈表现成熟，基本开箱即用，仅需少量修复即可高效运行。
所属事件:AMD MI355X 跑 Kimi K3 实测吞吐量与性价比超 B200(4 条相关)→
「Infra」频道最新
- 传 Google TPU 需求激增，2028 年预计达 1500 万颗 — SumitGup · 2026-08-03
- 单 CPU 8GB 内存跑 2.78 万亿参数 Kimi K3 — Saboo_Shubham_ · 2026-08-03
- tinygrad 预告本地部署新品，暗示 Qwen3.6-27B 即将发布 — max_paperclips · 2026-08-03
- Qwen3.8-27B即将开源，17GB内存即可本地运行 — danielhanchen · 2026-08-03
- AirLLM突破显存瓶颈：4GB显存单卡跑70B大模型 — techNmak · 2026-08-03
- MiniMax H3 开放权重上线 fal，开箱即享推理优化 — gorkem · 2026-08-03