寻找 STRATA 之外的 MoE 专家 GPU/RAM 换入换出方案

mossy_troll_84 · reddit · 2026-10-19

发帖者在研究类似 STRATA 的方案:用决策模型(如 JEV)来编排 MoE 模型专家在 GPU 与内存/交换分区之间的换入换出。他在 Reddit 和 Google 上都没找到有前景的替代或分支项目,于是向社区求问是否有类似方案,希望在 STRATA 之外再挤出一些 token 吞吐。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →