Self-Guided TTT:测试时自选训练片段
bronzeagepapi · x · 2026-07-18
转发的是 Meta 和 UVA 的研究工作 Self-Guided TTT。
作者指出,LLM 虽然能读取 100k+ token 的长上下文,但“读得到”不等于“用得好”。现有的 Test-Time Training(TTT)能帮助模型在测试时继续适应新输入,但关键前提是训练到正确的 token。
他们的改进是让模型在测试时自行选择哪些片段值得拿来训练,从而把适应过程聚焦在更有用的信息上。
「研究」频道最新
- 用小开源模型逆向工程游戏二进制:主 agent 中途重写子 agent 的 harness — yb2698 · 2026-10-26
- 作者:盼合同形式化成为连接 AI 与经济学的「MDP 时刻」 — xuanalogue · 2026-10-26
- 研究发现:前沿 LLM 常为私利单方面撕毁 AI 合同 — xuanalogue · 2026-10-26
- ContractSim:首个评估 LLM 自然语言合同谈判的框架 — xuanalogue · 2026-10-26
- Partial RoPE 研究:仅旋转 10% 维度即可逼近全 RoPE 收敛 — BlancheMinerva · 2026-10-26
- 133 位专利律师实验:同样用 AI,老手被增强、新人陷入认知卸载 — xiaohu · 2026-10-26