新基准 TRACES 评估 AI 发现能力,不只看最终答案
rohanpaul_ai · x · 2026-08-20
Rohan Paul 推荐了 Apodex 提出的新基准 TRACES,旨在评估“发现式 AI”(Discoverative AI) 的能力。传统基准多测试模型能否找到已知答案,而 TRACES 专注于评估系统在没有现成答案的情况下,通过证据、工具和验证来调查重要问题的能力。它将 AI 发现视为一个完整的调查过程,而非单一结果,从而区分高分结果与高质量的过程(包括错误修正和主张落地)。Apodex 发布了“发现智能”的定义、判断调查质量的评分标准,并开放征集解题者和测试问题。
所属事件:Apodex 发布 TRACES:首个评测发现型 AI 的基准(8 条相关)→
「研究」频道最新
- 每图元仅 10 参数:36 个图元精准拟合 T-pose 人体 — letandrewcook · 2026-10-16
- 可解释性研究者泼冷水:模拟不了神经元就不算真正解释了它 — nabla_theta · 2026-10-16
- MLP-Splatting 论文开源:用光场原语替代高斯泼溅 — AjdDavison · 2026-10-16
- 四页短文解 subcubic 全对最短路径,借力 Anthropic AI 参与的突破 — gautamcgoel · 2026-10-16
- 浙大等团队发布 ATAS 框架:用世界状态记忆实现一致性长视频生成 — CSProfKGD · 2026-10-16
- 4B 模型加 8K 上下文堆算力反而更差,Hermes 提出上下文推理新思路 — mangahomanga · 2026-10-16