Meta 提出首个联合循环与稀疏的 MoE 缩放律,推理效率提升约 2 倍

fly51fly · x · 2026-10-02

Meta AI 研究者发布论文《Scaling Laws for Looped Mixture of Experts》,提出首个同时建模循环(recurrence)与稀疏(MoE)的缩放律 Loop Scaling Laws,将两者与模型规模、数据量纳入统一框架。

所属事件:Meta 发布首个循环与稀疏联合的 MoE 缩放律(3 条相关)→

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →