训练 210 个多模态模型后提出 RANCEL:免训练预测视觉编码器下游表现,Spearman 达 0.85

机器之心 · wechat · 2026-10-17

研究团队训练并评测了 210 个 MLLM(70 种视觉编码器 × 3 个 LLM),发现现有跨模态评测指标在候选池扩大后预测能力显著下降甚至不如纯视觉指标。他们提出免训练方法 RANCEL:基于图文表征近邻一致性,配合带稳定项的 PCA 白化与 patch 级双向匹配,平均 Spearman 相关系数达 0.85,大幅超越需训练的 Alignment Probing(+36.1%)及其他免训练方法(+93.5%/+101.1%)。代码、评测框架与全部 210 个模型权重均已开源。

原文链接 →

「多模态」频道最新

更多「多模态」频道 AI 资讯 →