Library of Layers:推理时动态重排 Transformer 层顺序
EPFL、马里兰大学、NYU、哥伦比亚大学等机构团队发布 arXiv 新论文《Library of Layers》(LoL),提出打破现有 LLM 固定的层执行顺序,在推理时基于共享层库(expert blocks)为每个输入动态路由并排列 Transformer 各层,甚至可直接控制模型的解题算法。研究者 Sean Mcleish 对该架构做了介绍,论文在 Reddit 等社区引发讨论。
2026-11-03 ~ 2026-11-04 · 3 条相关
- EPFL 等提出 Library of Layers:推理时动态排序 Transformer 层 — Abdellah Rahmani · 2026-11-03
- Library of Layers:按输入动态重排 transformer 层顺序,可直接控制解题算法 — jonasgeiping · 2026-11-04
- 新论文 Library of Layers:运行时自适应重排 Transformer 层顺序 — Thrumpwart · 2026-11-04