单节点吞吐量达 952 tok/s,AMD MI355X 跑赢英伟达 B200
adrianscottcom · x · 2026-08-03
工程师成功在单台 AMD MI355X 服务器上部署 Kimi K3 模型,凭借 AMD 显存优势,单节点总吞吐量达 952 tok/s,单用户达 118 tok/s。
实测数据显示,该节点总吞吐量是 16×B200 设置的近 4 倍,且性能价格比优于 B200 和 B300。此外,AMD ROCm 软件栈表现成熟,基本开箱即用,仅需少量修复即可高效运行。
所属事件:AMD MI355X 跑 Kimi K3 吞吐达 952 tok/s(6 条相关)→
「Infra」频道最新
- 同样 1000 个 Cloudflare Durable Objects,月成本从 4050 美元压到 22 美元 — threepointone · 2026-10-16
- NVIDIA 发布 Qwen3.8-Flash FP4 量化版,主打本地部署 — nvidia · 2026-10-16
- 百度提出 Virtual Head Attention:同时压 KV cache、算力并保质量 — baidu · 2026-10-16
- DuoDiscover 让 Agent 自建快速评估代理,TPU 内核提速 2.68 倍 — berkeley_ai · 2026-10-16
- Google 将 2026 年资本开支上调至最高 2050 亿美元 — emmanuelvivier · 2026-10-16
- Google 开源 AX:像 Kubernetes 一样编排数十亿 Agent 任务 — thisdudelikesAI · 2026-10-16