UCSB 组建 AI 研究员团队,自主发现超越 GDN2 的线性注意力架构

UCSantaBarbara · hf · 2026-10-22

UC Santa Barbara、宾州州立与 LinkedIn 的研究构建了一支「持久型」AI 研究员团队,探索用多个协作 AI 研究员加速科学发现。设计要点:

团队被部署去搜索线性注意力架构,发现的架构在 1.3B 规模的语言建模、常识推理、合成与真实检索任务上均超越 GDN2。消融实验显示:去掉学科背景,搜索早早停滞;去掉私有历史,即使共享相同证据进度也变慢;均匀分配不如自适应分配。结论:持续的自主发现不仅取决于更强的 Agent,还取决于谁在探索、记住了什么、研究精力如何分配。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →