微软发布 Universal YOCO:递归计算高效扩展模型深度

微软亚洲研究院 Yutao Sun、Li Dong、Furu Wei 等人发布新论文《Universal YOCO for Efficient Depth Scaling》(arXiv:2604.01220),提出通过参数共享的递归计算实现高效的深度扩展。同时 YOCO(You Only Cache Once)作者宣布架构演进:在原有 Looped YOCO 基础上新增 YOCO + Sparse Attention 稀疏注意力分支,使 YOCO 发展为一个架构家族。

2026-09-11 ~ 2026-09-11 · 3 条相关