开源癌症模型实测 34 张子宫癌 CT:均命中肿瘤,但中位 Dice 仅 0.22
MaziyarPanahi · x · 2026-11-20
开发者 Maziyar Panahi 用 Johns Hopkins 与 Stanford 的开源模型 Merlin-Cancer-Super 在 34 张公开的子宫癌女性 CT 上做了无提示实测:
- 每张 CT 的肿瘤都被模型触碰(34/34),单张 A100 上一次扫描仅耗时 107 秒
- 最好一例 Dice 达 0.83,落在放射科医生勾画的轮廓内;但模型把 34 例中的 30 例勾得比医生小
- 中位 Dice 仅 0.22,作者设定的 8.7 mL 阈值标记出 17 例;由于所有扫描都有癌症,尚无假阳性率数据
结论:模型召回能力惊人但分割精度远未达临床水平,实测方法对评估医疗开源模型很有参考价值。
所属事件:约翰霍普金斯开源癌症模型实测:34 例子宫癌 CT 全部检出肿瘤(3 条相关)→
「模型」频道最新
- 用户晒 ChatGPT 语音模式只回「Mm-hmm」,怒批 20 美元只换 3 小时额度 — JackieFiest · 2026-11-20
- Xeophon 对谈 ECI 评测创建者,聊聊评测圈现状 — xeophon · 2026-11-20
- GPT-6.2 双模型登顶 RWE-Bench:主打省成本而非堆能力 — Jsevillamol · 2026-11-20
- 用户观察 Gemini Carbon 科研表现:置信度随实验更新剧烈摆动 — arjunrajlab · 2026-11-20
- Gary Marcus 质疑 Anthropic 评测分从 83 跳到 110 能否持续 — GaryMarcus · 2026-11-20
- Nature 分析:LLM 令人担忧的行为约 16 个月后自行消退 — james_y_zou · 2026-11-20