DeepMind/Kaggle 大奖判定遭质疑
TheWerkmeister · reddit · 2026-07-18
作者质疑 Google DeepMind 赞助的 Kaggle 竞赛 “Measuring Progress Toward AGI - Cognitive Abilities” 的评审结果,认为一个充满问题的提交拿到了 2.5 万美元大奖。
帖子核心是在做“比赛判奖是否合理”的证据梳理:
- 参赛目标是设计基于认知科学的新 AI benchmark
- 作者称被分析的作品本意是让 LLM 看到其他模型对 5 个陈述的不同观点,再观察模型是否改变态度
- 但最终提交被写成了远超要求格式的长篇“拼贴”,充满不充分的论断
- 作者进一步质疑评委是否真的认真阅读了方法、代码和数据
组织方的立场是:评审已按规则完成,这只是主观判断问题。
「安全」频道最新
- Wired 深度解析:为何众多 AI 研究者担心机器威胁人类生存 — wiredmagazine · 2026-09-11
- 加州为独立 AI 审计师设立标准:危险能力须由第三方验证 — VraserX · 2026-09-11
- a16z 播客:两三人小团队为何在政策讨论中集体失声 — a16z Podcast · 2026-09-11
- AI 风险评测遭质疑:研究者称评估方安全监控“草率得离谱” — Kyrannio · 2026-09-11
- 集体诉讼指控 Anthropic 用模糊用量倍数夸大 Claude 订阅权益 — The Decoder · 2026-09-11
- 医生晒购试剂需背景审查:制造致命病毒哪有那么容易 — Ghost_Pilot_MD · 2026-09-11