LLM 挖出 599 个 NeurIPS 项目的代码提交史:约 24% 研究决策被推翻或弃用

ChenhaoTan · x · 2026-10-15

一项研究用 LLM 阅读 NeurIPS 论文代码仓库的提交历史,将 commits 归类为研究决策(方法变更、新实验、消融),覆盖 599 个项目、13,271 个决策。发现约 24% 的决策后来被替换或放弃——这类「弯路」几乎从不出现在最终论文里。论文只展示最终结果,不展示被抛弃的方法与实验。ChenhaoTan 引用时表示团队正在做相关方向的工作,同时也期待这类数据能在更通用的下游任务上发挥作用,而非仅限于围绕数据本身设计的任务。

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →