OCT-Bench 用 10,076 题测试多模态模型能否读懂视网膜扫描
Baochen Fu · hf · 2026-07-21
OCT-Bench 用 10,076 道题系统评测多模态模型看懂 OCT
这篇工作提出了一个面向光学相干断层扫描（OCT）的新基准 OCT-Bench，目标不是只测模型能否粗分疾病，而是看它是否真的理解眼科影像并完成临床推理。
- 数据规模：基准包含 10,076 道选择题，由 4,137 张 OCT 图像构建，覆盖 7 个公开数据集。
- 任务设计：按真实临床解读流程，建立了 20 个细粒度任务，分为 感知、认知、推理 三层。
- 覆盖内容：影像属性、视网膜解剖、病灶特征、空间关系、疾病判断、治疗决策、预后管理等。
- 评测对象：测试了 20 个代表性 MLLM，包括闭源模型、开源通用模型和医学专用模型。
- 主要结论：当前模型距离可靠的 OCT 理解仍有明显差距；医学微调和更大规模并不能在各能力层级上稳定带来提升。
作者希望借助这个基准，更细致地定位多模态模型在医疗影像理解中的瓶颈。
「多模态」频道最新
- AI视频既非电影也非动画，创作者称它最擅长呈现梦境与潜意识 — Kyrannio · 2026-10-27
- 把儿子 31 年前的童言写成歌再喂给 SUNO：一首「大象饮料」儿童合唱 — NathanpmYoung · 2026-10-27
- RTX 3060 本地产 AI MV 播破 20 万:900 张图留 64 张,3 秒切片防崩脸 — Hwang0500 · 2026-10-27
- Firefly 视频编辑器实测：一句话 Quick Cut 将 32 秒素材剪成 20 秒 — LudovicCreator · 2026-10-26
- Hi3D V1.0 开源发布：训练资产翻四倍，切片成功率 90% — kimmonismus · 2026-10-26
- 用 Claude 十分钟替代 YouTube 缩略图设计师 — thedankoe · 2026-10-26