LLM 有研究品味吗?Lossfunk 论文用选题任务实测
paraschopra · x · 2026-09-03
Lossfunk 团队发布论文《Eliciting Research Taste in LLMs through Future Research Direction Choice》,被 COLM 2026 的 LM4Sci workshop 接收。论文把研究者主观的「研究品味」操作化为一个可评测任务:给定研究方向,让模型在多条未来研究路线中做出选择,以此衡量 LLM 的研究判断力,并报告了各模型在该任务上的表现。作者 paraschopra 称这是首次把「研究品味」变成可量化的选择问题。
「研究」频道最新
- Meta CORAL:AI Agent 驱动数十亿用户的生产级推荐系统 — omarsar0 · 2026-09-03
- 研究团队构建 Software World:由 Agent 协作运营的 GitHub — dan_fried · 2026-09-03
- TabICLv2 表格基础模型研究报告:ICML 工作坊演讲视频公开 — RichmanRonald · 2026-09-03
- Task-Circuit Quantization:用可解释性定位知识实现模型压缩 — EliasEskin · 2026-09-03
- 开发者自称工作中意外做出 SOTA 化学反应抽取模型 — IndraVahan · 2026-09-03
- 一张照片定位无名小岛:地平线几何+CUDA 暴力搜索海岸线 — JeremyCMorgan · 2026-09-03