AI 科学家有了新标尺:从“考试”转向真实发现闭环
量子位 · wechat · 2026-08-24
由深度原理、微软、斯坦福等机构联合发布的论文《Measuring AI Scientists: From Exams to Discovery》,提出了“发现回合(discovery episode)”评估体系,改变了以往仅靠 HLE 闭卷考试衡量 AI 科研能力的模式。新体系全程记录 AI 在“假设→设计实验→执行验证→迭代优化”全周期的决策轨迹,重点考核实验结果的科学性与真实性,并将失败数据视为核心资产。作为该体系的应用样本,深度原理的 MIRA 平台在 ResearchClawBenchmark 和 ScienceAgentArena 评测中均位列第一,展示了跨干湿实验室的闭环科研能力。
「研究」频道最新
- UT Dallas 论文 Jev-Mem:小模型做记忆决策,长对话记忆构建快 6.6 倍 — rohanpaul_ai · 2026-10-25
- 拜耳牵手斯坦福初创 Phylo,AI 智能体加速新药研发 — RichardsonDx · 2026-10-25
- 96 台人形机器人共享经验互学,五项任务成功率从 81% 升至 97.3% — CyberRobooo · 2026-10-25
- HCI 研究者尝试用 AI 打造贝叶斯统计封装库降低使用门槛 — IanArawjo · 2026-10-25
- 《谷歌背后的线性代数》短论文拆解 PageRank 数学原理 — HankYeomans · 2026-10-25
- 两篇代码 LLM 论文入选 EMNLP2026:行为合规基准与自验证共进化 — algo_diver · 2026-10-25