MEMOIR 开源基准:117 名虚拟肿瘤患者考问 AI 长期临床记忆
jefrankle · x · 2026-09-24
开放基准 MEMOIR(Memory Evaluation over Multi-year Oncology Inference & Retrieval)发布,用于评测 AI 对多年期临床记忆的表征能力。
- 规模:117 名合成肿瘤学患者、65,377 条临床事件、3,617 个问题
- 覆盖任务:事实检索、罕见事件检测、临床病程重建、纵向推理
- 核心主张:临床记忆与对话记忆结构不同——患者病史由多系统、不同频率、跨越数年的事件拼成,回答可能需要定位单个事件、重建时间序列或串联整个治疗周期
- 评测对象包括 mem0(向量记忆)、Graphiti(时序知识图谱)、Letta(agent 管理记忆)及直接检索等方案
所属事件:MEMOIR 基准开源:117 名虚拟肿瘤患者考问 AI(2 条相关)→
「研究」频道最新
- CoRL 热议「agent 太慢」,研究者拆解出三种截然不同的批评 — tomssilver · 2026-11-11
- CoRL 热议「agent 太慢」,研究者拆解出三种截然不同的批评 — tomssilver · 2026-11-11
- CoRL 热议「agent 太慢」,研究者拆解出三种截然不同的批评 — tomssilver · 2026-11-11
- CoRL 热议「agent 太慢」,研究者拆解出三种截然不同的批评 — tomssilver · 2026-11-11
- CoRL 热议「agent 太慢」,研究者拆解出三种截然不同的批评 — tomssilver · 2026-11-11
- 形式化验证让 AI 编码更快:Lean 证明成为 agent 优化护栏 — bigdata · 2026-11-11