用4台H100和RoCE跑K3
TheZachMueller · x · 2026-07-17
作者表示,等 K3 发布后,自己会先用一个比较“jank”的超算/云基础设施方案来跑起来。 具体配置是:**4 台 H100 节点,通过 RoCE 互联**。这条帖子的重点不是模型本身,而是本地/私有化部署所依赖的算力与网络栈。
所属事件:社区热议 Kimi K3 本地部署的极高硬件门槛(4 条相关)→
「Infra」频道最新
- 高通预览端侧 GGUF 运行工具GenieX — carrycooldude · 2026-07-20
- DwarfStar 让 Ada 卡盒变推理服务器 — antirez · 2026-07-20
- DwarfStar 新增多项推理优化 — antirez · 2026-07-20
- BMS 在 Vera Rubin 上建 AI 工厂 — nordicinst · 2026-07-20
- Hut 8 签下98亿美元AI租约 — sunychoudhary · 2026-07-20
- 中国开源模型重塑AI经济学 — Stratechery · 2026-07-20