研究者担忧闭源 AI 评测泛滥：公众无法审查且存利益冲突
evijit · x · 2026-10-18
AI 研究者 evijit 指出，越来越多 AI 评测（evals）以封闭形式运行，公众无法分析和修正其中的问题，这对科学界有害且不可持续——尤其是评测往往由单一机构（甚至可能是学术实验室）托管，形成单点故障。
他进一步提出几个关键质疑：
- 第三方研究者如何衡量一个评测本身的质量？
- 运行评测的算力由谁买单？如果是有资源的大实验室，它们本就可能不诚实，是否构成利益冲突（COI）？
- 小型开源实验室和社区开发者在这种格局下如何立足？
讨论核心是评测基础设施的透明度与治理问题。
「漫话AGI」频道最新
- 「初级岗位没凉」派遭群嘲:WSJ 建议求职者更新 LinkedIn 引发争议 — felpix_ · 2026-10-18
- AI 研究员 Mariya Ivasileva 撰文反思:科研诚信正被速度与曝光侵蚀 — mariyaivasileva · 2026-10-18
- MIT 让 Claude 驱动的智能体在岛上自由玩 30 小时，发现「机器玩耍」能自学新能力 — LuizaJarovsky · 2026-10-18
- 用 AI 并不平权：研究者称用好 AI 需要高认知与主动性 — davidmanheim · 2026-10-18
- Epic CEO 呼吁开发者公开为 AI 正名：大多数人都在用且喜欢用 — lucasmeijer · 2026-10-18
- 研究者发声:只关注文本模态的路线难以通向 AGI — Angaisb_ · 2026-10-18