SemiAnalysis 实测 Engram DRAM offloading 性能提升最高 50%
bookwormengr · x · 2026-09-23
SemiAnalysis 发布了对 DeepSeek 提出的 Engram 技术的实测与技术分析，指出把 Engram 卸载到 DRAM 后，在 H200、B200、B300 甚至 GB300 NVL72 上性能最多可提升 50%。
关键信息：
- Engram 是 DeepSeek 为减少对 HBM 依赖、更多利用 DRAM/LPDDR 而做的设计。
- SemiAnalysis 团队与 NVIDIA、AMD 的工程师协作，把 Engram 的 ROCm DRAM offloading 支持上游进了 vLLM（PR 57491），同样实测到最高 50% 的性能提升。
- 相应地，NVIDIA、AMD 与 SemiAnalysis 正通过多个 PR（985、1002、1005、1006）更新默认推荐配置，改用 Engram offloading。
发帖人评价 SemiAnalysis「新闻报道层面一流，但作为前瞻分析师总是慢半拍」，认为它对 Engram 的关注来得太晚。
所属事件:SemiAnalysis 实测 Engram 卸载 DRAM 性能最高提升 50%(2 条相关)→
「Infra」频道最新
- Flash-dLLM:扩散式 LLM 推理提速最高 11 倍 — MBZUAI · 2026-09-23
- vLLM v0.30.0 发布:762 次提交,多项推理性能优化 — vllm_project · 2026-09-23
- Sea 成 ASEAN 首家采用 NVIDIA Vera Rubin 平台的企业 — NVIDIA Blog · 2026-09-23
- liuliu 提醒：宣称比 MLX/llama.cpp 快 4-10 倍的定制推理引擎多为噪声 — teortaxesTex · 2026-09-23
- 测算：DeepSeek DSec 集群单套物料约 2000 万美元，10 亿美元可建 50 套 — teortaxesTex · 2026-09-23
- B200 租赁价创新高,GPU 时租均价升至 7.88 美元 — sudoraohacker · 2026-09-23