ClinFusion 论文上线,提出医学视觉评测新基准

aigclink · x · 2026-08-01

本条补充了阿里达摩院开源医学多模态模型 ClinFusion 的 arXiv 论文链接与详细摘要。

论文核心指出,将多模态大语言模型(MLLM)部署到医疗领域本质上是一个以视觉为中心的挑战。ClinFusion 提出了一种包含 CaSL 融合算子的组合级联视觉编码器架构,统一了对 2D 和原生 3D 医学图像的理解。

此外,研究还引入了一套基于视觉的评估框架:包含用于评估指令遵循能力的 MedIF-Bench,以及一种结合感兴趣区域(ROI)的方法,用于评估临床对齐度和基于事实的报告生成能力。实验表明,ClinFusion 在多项综合指标上达到了 SOTA。

所属事件:阿里达摩院开源医学多模态模型 ClinFusion(2 条相关)→

原文链接 →

「多模态」频道最新

更多「多模态」频道 AI 资讯 →