微软发布 Universal YOCO:递归计算高效扩展模型深度
微软亚洲研究院 Yutao Sun、Li Dong、Furu Wei 等人发布新论文《Universal YOCO for Efficient Depth Scaling》(arXiv:2604.01220),提出通过参数共享的递归计算实现高效的深度扩展。同时 YOCO(You Only Cache Once)作者宣布架构演进:在原有 Looped YOCO 基础上新增 YOCO + Sparse Attention 稀疏注意力分支,使 YOCO 发展为一个架构家族。
2026-09-11 ~ 2026-09-11 · 3 条相关
- MSRA 团队发布 Universal YOCO:参数共享递归实现高效深度扩展 — donglixp · 2026-09-11
- YOCO 架构扩展出稀疏注意力分支,演进为架构家族 — donglixp · 2026-09-11
- 微软新论文 Universal YOCO:递归计算高效扩展推理深度 — donglixp · 2026-09-11