代数+范畴论解决 Transformer 状态追踪难题
burny_tech · x · 2026-08-16
针对 Transformer 在有限状态任务上表现差异巨大的谜题,新研究利用代数和范畴论提出了高度预测性的理论框架。该研究首次实现了对 Transformer 长度泛化能力的精确预测,深入揭示了其在状态追踪问题上的机制。
所属事件:代数与范畴论破解Transformer长度泛化之谜(2 条相关)→
「研究」频道最新
- Laurent Younes 机器学习导论:从优化到生成模型的全免费教材 — TheTuringPost · 2026-10-16
- JHU 教师 Laurent Younes 免费教材《机器学习导论》:覆盖优化到生成模型 — TheTuringPost · 2026-10-16
- RFdiffusion3 登上 Science,同步开源生物分子设计 agent 框架 Chaperone — anshulkundaje · 2026-10-16
- 微软论文:给路由器看会话历史,多轮 Agent 任务成功率多提 3.3 分 — dair_ai · 2026-10-16
- 研究者痛批烂评测泛滥:每个人都该亲手做一次好 eval — gabriberton · 2026-10-16
- 方格渗流连通常数悬而未决,网友称正是 AI 擅长的问题 — tak3sh8 · 2026-10-16