新研究:LLM agent 缺乏时间感,跑数小时也估不准自己花了多久
solyarisoftware · x · 2026-08-18
Maksym Andriushchenko(牛津)发布新博客 《Are LLM agents time-aware?》,研究 LLM agent 能否预测任务的墙钟时间、能否估计自己已花费的时间,实验覆盖 ProgramBench、PaperBench、DeepSWE 等长时程基准。与 MATS 学员 M. Ofengenden 合作。
Rohan Paul 转发点评指出其含义:AI 编码 agent 可以在任务上花数小时而没有校准的时间流逝感,因此长时程评测可能需要直接测量「按时停止/时长跟随」能力,而不是把持续的任务表现当作 agent 知道何时该停的证据。
所属事件:牛津研究:LLM Agent 几乎没有时间概念(9 条相关)→
「研究」频道最新
- EMNLP 论文揭示 LLM 偏爱 7 的根源:SFT 数据把浅偏置焊进模型 — radamihalcea · 2026-10-17
- OpenAI 研究员质疑 ECDSA 时间戳方案:对手可操纵的输入无法靠哈希消除 — csvoss · 2026-10-17
- 业内观点:SWA 才是前沿秘方,DeepSeek 与 Kimi 偏走独立自研路线 — burny_tech · 2026-10-17
- 新论文用竞争性神经元胞自动机演化出类生命自组织行为 — burny_tech · 2026-10-17
- Vals AI 将递归自我改进预测提前至 2027 年 7 月 — 141_1337 · 2026-10-17
- Transformers 支持激活检查点卸载到 CPU,GPU 显存紧张者福音 — StasBekman · 2026-10-17