Apodex 发布 TRACES 基准:衡量 AI 探索未知而非回答已知
omarsar0 · x · 2026-09-04
AI 研究者 Omar Sanseviero(@omarsar0)与 Apodex 团队联合介绍新基准 TRACES,定位为「发现式 AI(Discoverative AI)」新范式——不测 AI 回答已知问题的能力,而是衡量其能多远地推进人类未知前沿。
- 规模:首期发布覆盖 17 个可执行环境、218 个 episode,来自首批 20 个问题中的子集;总共注册了 423 个真实世界问题。
- 首批领域:生物医学(AAV 衣壳设计)、临床转化(临床试验、药物重定位)、前沿模型工程(LLM Engineering,11 个模型逐格对比)。
- 早期结果:Apodex 自报某模型在 AAV 衣壳设计能力上超过该领域已发表的最好方法,但未经独立验证。
- 基准附带实时排行榜(1,182 条轨迹),由盛大创始人陈天桥创立的 Apodex 推动发起。
所属事件:Apodex 发布 TRACES 基准:评测 AI 探索未知的能力(9 条相关)→
「漫话AGI」频道最新
- 数学家 Daniel Litt 认输后谈 AI:能解题,但自动化不了数学研究 — ziv_ravid · 2026-10-21
- AI SaaS 变现困局:消费者市场小、企业月付仅 20 美元 — menhguin · 2026-10-21
- Tim Dettmers:AI 下一十年最激动的工作将在高校实验室 — StasBekman · 2026-10-21
- Google 研究:AI 每周省 7 小时,但近半科学家积压未验证假设 — AnneliesGamble · 2026-10-21
- UW 学者 Stanford 演讲:用 CSCW 理论设计人机协作系统 — amyxzh · 2026-10-21
- 研究投入 23 倍仍难挡研究生产率下滑,AI 尚未改写曲线 — ChenhaoTan · 2026-10-21