研究发现自动化发现系统没有通用最优 harness
LChoshen · x · 2026-07-22
一项受控研究发现：自动化发现并不存在“放之四海皆准”的最佳 harness。
- 更简单的 harness 往往能和更复杂的系统打平，甚至超过 OpenEvolve 这类方案。
- 最优选择会随着 model–problem pair 改变，因此 harness 的泛化性很差。
- 作者使用了重复的预算匹配实验、强基线和统计假设检验，以应对这种高方差设置。
- 研究还指出，如果在 rollout 过程中在线选择不同 harness，能缓解这个泛化问题，并推动更自适应的发现系统设计。
所属事件:研究称自动化发现不存在通用最优框架(2 条相关)→
「研究」频道最新
- HF 工程师争论:非生成任务全用因果注意力是在浪费算力 — antoine_chaffin · 2026-09-11
- 智利学者：AI 反馈规模化是医学教育可持续的关键 — julianvarascom · 2026-09-11
- Nature 新研究实现全身器官细胞活动成像,揭示跨器官体级回路 — arjunrajlab · 2026-09-11
- SignNet 1M 手语数据集发布 — ducha_aiki · 2026-09-11
- ECCV26 口头论文：流匹配实现多视角点云配准 — ducha_aiki · 2026-09-11
- InFlux++ 方法发布 — ducha_aiki · 2026-09-11