科学系教科书作者：99.9% 准确率可能等于零个发现
bravo_abad · x · 2026-09-20
一位正在为理科学生写教科书的作者指出：好的模型架构救不了泄漏的数据切分、有偏的标签或与科学问题不匹配的评估指标。在建模之外，那些常被归为"技术细节"的东西其实决定科学结论：
- 测试集切分定义了你的科学主张
- 所谓 "ground truth" 很少是真金标准
- 99.9% 的准确率可能意味着零个科学发现
- 损失函数本身就是一个科学假设
- 没有不确定性的预测往往只是半个预测
作者把这 11 条学生绝不能搞错的原则连同图示整理成一篇新文章，发布在 Discovery at Scale 上。
所属事件:科研 ML 教材强调 99.9% 准确率可能等于零发现(2 条相关)→
「研究」频道最新
- 微软研究员提醒：BERT 在 2019 年就被称为 LLM — JFPuget · 2026-09-20
- OpenAI 称解出 Navier-Stokes,被质疑「偷用」数学家的 Codex 会话成果 — ExamImmediate8956 · 2026-09-20
- AI 加速科学发现了吗？网络攻击激增、数学微增、算法无明显变化 — soumitrashukla9 · 2026-09-20
- TovanaEngine：用 5 万条 SWE-bench 运行数据训练本地编码 agent 世界模型 — Decent-Ad9950 · 2026-09-20
- Scrabble 也被 AI 拿下了?传奇棋手 Richards 据称仍能击败引擎 — zuilserip · 2026-09-20
- rasbt 谈 Jev 突破：秘诀在数据而非算法，同类竞品仍差很远 — RichmanRonald · 2026-09-20