Ethan Mollick 转发新论文:未饱和基准错误泛滥,严重低估 AI 能力
emollick · x · 2026-09-16
Ethan Mollick 指出公共 AI 基准测试的现状「很糟糕」，正在削弱我们判断当前 AI 真实水平的能力。他转发的论文显示：最知名的评测指标大多已被打满（饱和），而尚未饱和的基准又充斥大量错误，导致这些测试系统性地大幅低估了 AI 的实际能力。论文链接见原帖。
所属事件:Mollick 批公共AI基准失效,系统性低估模型能力(2 条相关)→
「研究」频道最新
- VLM 读盲文研究：全球 4300 万盲人，模型几乎读不了盲文 — prajdabre · 2026-11-02
- 研究用联想记忆解释扩散模型:虚假记忆或标志生成能力涌现 — DimaKrotov · 2026-11-02
- r/LocalLLaMA 提议自建私有质量基准:别再疯追 tok/s — Express_Quail_1493 · 2026-11-02
- SIGGRAPH Asia 2026 首落地吉隆坡，12 月 1-4 日征文与注册开启 — tomaszbednarz · 2026-11-02
- AI 生成相变模拟走红 Reddit:序参量 0.99 的物理直觉可视化 — NedRadnad · 2026-11-02
- KAIST 提出 QCP：机器人策略可实时调控执行质量 — kaist-ai · 2026-11-02