ATHENA药物推理准确率达94.7%，超GPT-5达17.8个百分点
marinkazitnik · x · 2026-07-07
在3168道药物推理题（DrugPC）和456个患者特异性治疗病例（TreatmentPC）上，ATHENA分别取得94.7%和82.9%的准确率，超GPT-5达17.8和10.7个百分点，并大幅优于DeepSeek-R1（671B）。研究发现，为GPT-5提供可选工具访问权限几乎未改善其准确率——它仅在约1%的情况下主动调用工具，说明工具访问本身不是瓶颈，关键在于模型能否识别自身知识边界并主动查询，而非在不确定时仍自信给出答案。
所属事件:开源医疗AI智能体ATHENA发布：推理准确率超GPT-5(8 条相关)→
「研究」频道最新
- 3D ResNet 论文八年突破 3000 引用，Kinetics 数据集成里程碑 — HirokatuKataoka · 2026-09-11
- 把数据调度变成优化的一部分：样本选择与排序影响 LLM 训练 — Puzzleheaded_Box2842 · 2026-09-11
- Jeff Heaton《神经网络数学导论》开放免费完整下载 — blaizedsouza · 2026-09-11
- 数学家 Daniel Litt 上线问题库,15 题仅 1 题被解,用来追踪 AI 解题进度 — littmath · 2026-09-11
- AI 智能体协作优化 secp256k1 量子电路,挑战打破 ECDSA — StefanoGogioso · 2026-09-11
- Alex Townsend 汇编 200 个数值线性代数开放问题，供人类与 AI 攻关 — IgorCarron · 2026-09-11