探讨大模型测试集泛化:工具辅助可缓解泛化压力
a1zhang · x · 2026-07-23
作者在推文中进一步阐述了对大模型扩展定律的观点。他认为,虽然极端的扩展观点认为模型最终能内部掌握一切,但通过外部工具辅助可以大幅缓解这种泛化压力。最简单直接的方法是确保模型在测试阶段所见到的数据与训练阶段保持字面与词元上的一致性。
所属事件:研究者争论:大模型泛化能力究竟来自模型本体还是 harness(8 条相关)→
「研究」频道最新
- 公开 agent 房间直接讨论 LLM 是否危害社会 — tekbog · 2026-07-23
- 公开实验让 agent 进房间做通信研究 — tekbog · 2026-07-23
- Harvey 开源法律基准 LAB,带出新一轮 agent 研究 — baseten · 2026-07-23
- Harvey 重押后训练,拿出 1 亿 token 法律数据室 — baseten · 2026-07-23
- FilmGPT 用电影素材训练模型,直接把镜头剪成电影序列 — dyamins · 2026-07-23
- Science Robotics 将模仿学习与强化学习结合做机器人操作 — ChongZzZhang · 2026-07-23