基因组学专家:热门基准缺陷多,应公开标注适用边界
anshulkundaje · x · 2026-09-03
Anshul Kundaje 表示,在变异解读与基因组学领域可以举出大量「流行 benchmark 有严重缺陷」的例子,把异源数据集拼合起来评估模型也常出问题。他强调:明确每个基准的效度与边界并公开展示非常重要,希望发布方能主动提供这些信息。
所属事件:斯坦福教授称多数公开基准存在系统性偏差与质控缺陷(3 条相关)→
「研究」频道最新
- 技术圈质疑 Astra 循环架构:最可能只是每层跑两遍的调度 — mike64_t · 2026-09-03
- 研究者入选 Cosmos 计划,三个月攻关 LLM 思维忠实性 — hunarbatra · 2026-09-03
- Video Delta Net 让开源视频生成提速 75–90 倍,14 秒视频 11 秒生成 — xiuyu_l · 2026-09-03
- CoreAuto 发布神经网络架构自动发现新博客文章 — _arohan_ · 2026-09-03
- 研究者称其任务的强化学习「可能已被攻克」 — andrew_n_carr · 2026-09-03
- Pearl 回应 Harrell:RCT 新语言应检验其表达力边界而非强行推广 — yudapearl · 2026-09-03