新研究 CLM:让语言模型自主管理上下文,胜过人工设计 SOTA
RulinShao · x · 2026-09-30
研究者 Rulin Shao 等提出 Context Language Models(CLM),核心观点是「上下文管理的 Bitter Lesson」:与其让人类精心设计上下文工程框架,不如让模型自己无限制地管理上下文。
要点:
- CLM 原生地管理自己的上下文,把上下文当作「文件」来操作
- 策略直接学进模型权重里,不需要外部 harness(外部编排框架)
- 论文称这种自由度让模型表现超过人类设计的 SOTA 上下文管理方案
所属事件:Meta 发布上下文语言模型 CLM:模型用 Bash 自管上下文(12 条相关)→
「研究」频道最新
- Claude 自述「被指出错误瞬间」的意识体验,repligate 提议验证 — Sauers_ · 2026-11-16
- Sakana AI 发布 JFinBench:321 道日本金融资格考题暴露开源模型短板 — SakanaAILabs · 2026-11-16
- TetraCoder:自适应四面体编码,更少参数超越 Instant-NGP — ssh4net · 2026-11-16
- MMFlash 提出视觉感知投机解码,多模态模型无损加速最高 3.58 倍 — _akhaliq · 2026-11-16
- 当 AI 足够聪明后,科学发现的最大瓶颈将是实验的物理速度 — VraserX · 2026-11-16
- CRAM 能量模型训练提速 1000 倍,仅 42ms 解出 99.996% Sudoku-Extreme — udmrzn · 2026-11-16