斯坦福教授 Anshul Kundaje：多数公开 benchmark 存在系统性偏差
anshulkundaje · x · 2026-09-03
斯坦福教授 Anshul Kundaje 在讨论中呼吁研究者公开说明 benchmark 数据的审核与纠错流程。他表示在自己深耕的领域，大多数公开基准数据集存在严重偏差和各类质量问题，如果其他领域没有类似问题他会感到意外。他认为明确界定每个 benchmark 的有效性与局限本身就是重要信息，希望相关工作能显式披露这些内容。
所属事件:斯坦福教授称多数公开基准存在系统性偏差与质控缺陷(3 条相关)→
「研究」频道最新
- 技术圈质疑 Astra 循环架构:最可能只是每层跑两遍的调度 — mike64_t · 2026-09-03
- 研究者入选 Cosmos 计划，三个月攻关 LLM 思维忠实性 — hunarbatra · 2026-09-03
- Video Delta Net 让开源视频生成提速 75–90 倍，14 秒视频 11 秒生成 — xiuyu_l · 2026-09-03
- CoreAuto 发布神经网络架构自动发现新博客文章 — _arohan_ · 2026-09-03
- 研究者称其任务的强化学习「可能已被攻克」 — andrew_n_carr · 2026-09-03
- Pearl 回应 Harrell：RCT 新语言应检验其表达力边界而非强行推广 — yudapearl · 2026-09-03