Context Language Models 论文原稿:把上下文当文件让模型自管,成绩与细节一览
alex_verem · x · 2026-10-05
这是 Meta 与 UW 团队 Context Language Models 论文的 arXiv 原文(arXiv:2609.37725),作者包括 Rulin Shao、Pang Wei Koh、Luke Zettlemoyer 等。核心做法是把上下文视为文件,允许模型无限制地更新自身上下文,多 agent 场景下各上下文以文件形式共存。
摘要中的量化结果:BrowseComp-Plus 上准确率高 11.4%、FLOPs 省 21.5%;12 小时 EdgeBench 高 5 分、省 59% FLOPs;24 小时多仓库 agent 集群任务同算力下改进多 65%。通过 skill-optimization 演化出的自然语言指令可将 held-out 准确率提升至多 35.9 分;在线 RL 让 Qwen3.5-9B 提升 47.6% 且省 12% FLOPs。还设计了 Suffix Cache Reuse 服务端优化,较标准 SGLang 再省 35% 服务端算力。
所属事件:Context Language Models:让模型像编辑文件一样自管上下文(7 条相关)→
「编程与Agent」频道最新
- Murat 发布 TLAPS-Bench:用 TLA+ 形式化证明真实系统规格的正确性 — tianyin_xu · 2026-11-19
- Rivet 实战经验:别让 JEV 推理,拆成微小是非题反而更准 — yawnxyz · 2026-11-19
- 16 次 MVP 老手用原生 PowerShell 给微软 Intelligent Terminal 造了个自定义 Agent — dfinke · 2026-11-19
- 马斯克喊话:把 Grok Bot 当成一个很聪明的员工来用 — elonmusk · 2026-11-19
- Eve 编码工具复用编译器模块图,构建时间从 56.9 秒降到 6.9 秒 — evilrabbit_ · 2026-11-19
- Klaus 分享 AI 测试平台界面:一句话即可生成全站测试 — KlausCodes · 2026-11-19