SentZero:句子级视觉语言预训练提升胸片零样本多任务分析

Hangyul Yoon · hf · 2026-09-30

论文提出 SentZero,一个面向胸部 X 光零样本多任务分析的句子中心视觉语言预训练框架。针对现有方法的两大问题——正样本对多样性受限、临床上等价的句子跨患者重复造成对比学习假阴性——SentZero 引入基于 LLM 的摘要级句子结构化与映射来扩展正样本对,并增加额外损失项缓解假阴性;同时通过句子条件残差调制让视觉特征适配每个句子的语义特性。在多个下游任务和数据集上,SentZero 的零样本泛化优于此前多任务零样本方法。