LLM 挖出 599 个 NeurIPS 项目的代码提交史:约 24% 研究决策被推翻或弃用
ChenhaoTan · x · 2026-10-15
一项研究用 LLM 阅读 NeurIPS 论文代码仓库的提交历史,将 commits 归类为研究决策(方法变更、新实验、消融),覆盖 599 个项目、13,271 个决策。发现约 24% 的决策后来被替换或放弃——这类「弯路」几乎从不出现在最终论文里。论文只展示最终结果,不展示被抛弃的方法与实验。ChenhaoTan 引用时表示团队正在做相关方向的工作,同时也期待这类数据能在更通用的下游任务上发挥作用,而非仅限于围绕数据本身设计的任务。
「研究」频道最新
- 一次训练全局重要性排序:Transformer 按算力预算动态剪枝 — cgmsnoek · 2026-10-15
- 把嵌入模型 EmbeddingGemma 2 改造成语音双向模型 — kastnerkyle · 2026-10-15
- 新论文:图像 tokenizer 应在图像编码之间训练,伪影更少收敛更快 — ostrisai · 2026-10-15
- Robocurve 公开全部 2109 条机器人运行记录,Gemini 4 Argon 平均分 33.8% — zacharynado · 2026-10-15
- Schmidhuber 再谈残差连接发明史:LSTM 即旋转90度的 ResNet — SchmidhuberAI · 2026-10-15
- PPO 微调让 LLM 输出分布越练越尖,GFlowNet 目标可保均匀分布 — kastnerkyle · 2026-10-15