为何 HBF 无法取代 HBM?适用场景与软件层限制
AccBalanced · x · 2026-08-24
- 核心观点:HBF(高带宽闪存)并非 HBM 的替代品,只能在特定场景下提供巨大价值,而非通用解决方案。
- 适用场景:适合对带宽需求不高,但需存储大量权重的场景;与 MoE 模型配合良好(大模型存 HBF,小专家调入 HBM);也适合 Expert Parallelism,因为单个 HBF 栈可容纳大量专家。
- 限制因素:软件层目前不支持 HBM 与 HBF 混合使用;虽然存储更多权重能减少网络/通信开销,但在高带宽需求场景下无效。
「Infra」频道最新
- 英伟达携手瑞典 Wallenberg,Launch 共享 AI 超算 Sferical One — nvidia · 2026-10-16
- 基础设施下一站:能自我进化、自我验证的自适应系统 — _shreya_s · 2026-10-16
- 小米 MiMo RL 训练曝光:30 步花掉 347 万美元 — bycloud · 2026-10-16
- Cerebras 用异构 prefill 池喂晶圆级引擎,解码速度与 batch 解耦 — ai · 2026-10-16
- d-Matrix Corsair 机架正式出货,演示 H100+8 XPU 跑出 845 tok/s — ai · 2026-10-16
- Actual 实测 DGX Station 跑出 10k tok/s,推理引擎与 GB300 案例曝光 — natesiggard · 2026-10-16