MEMOIR 开源基准:117 名虚拟肿瘤患者考问 AI 长期临床记忆
jefrankle · x · 2026-09-24
开放基准 MEMOIR(Memory Evaluation over Multi-year Oncology Inference & Retrieval)发布,用于评测 AI 对多年期临床记忆的表征能力。
- 规模:117 名合成肿瘤学患者、65,377 条临床事件、3,617 个问题
- 覆盖任务:事实检索、罕见事件检测、临床病程重建、纵向推理
- 核心主张:临床记忆与对话记忆结构不同——患者病史由多系统、不同频率、跨越数年的事件拼成,回答可能需要定位单个事件、重建时间序列或串联整个治疗周期
- 评测对象包括 mem0(向量记忆)、Graphiti(时序知识图谱)、Letta(agent 管理记忆)及直接检索等方案
所属事件:MEMOIR 基准开源:117 名虚拟肿瘤患者考问 AI(2 条相关)→
「研究」频道最新
- Anthropic:Claude 在噬菌体 DNA 中发现未知酶系统 — KevinKaichuang · 2026-09-24
- TRACES 框架六维评估 AI 能力,AAV 衣壳设计超 SOTA 7% — dr_cintas · 2026-09-24
- Yoav Goldberg 点评:LLM 靠类比 CRISPR 识别出生物学新模式 — yoavgo · 2026-09-24
- 新基准 TRACES 不看答案对错,专评 AI 解决未知问题的过程能力 — dr_cintas · 2026-09-24
- ECCV MMBU 基准揭示:视觉语言模型答对题却认不出图像模态 — davidjhwu · 2026-09-24
- 研究发现:作者其实能较准预测自己哪篇论文高被引 — RexDouglass · 2026-09-24