研究:推理并非总有用,15.7% 案例反而拉近难负样本
_reachsumit · x · 2026-09-25
arXiv 论文《Is Reasoning Always Useful? Rethinking Reasoning Utility in Universal Multimodal Embeddings》(EMNLP 2026 Findings)研究推理增强型通用多模态嵌入(UME)中推理效用的边界。
核心发现:
- 以 UME-R1 为对象,把推理效用分解为正样本增益、难负样本增益及其差值:56.6% 的案例推理提升正样本相似度,但其中 15.7% 是「假有益」——推理把难负样本拉得更近,反而损害判别力
- Token 归因与邻域诊断显示:有影响力的 CoT token 往往编码正负样本共享的证据,推理的去压缩方向与判别边界不对齐
方法:提出免训练的 SURE(Score-structure Utility Router for Embeddings),无需重训、无需基于标签的策略选择、无需额外 VLM 前向,即可提升 UME-R1-7B 1.5 分,并在另外两个嵌入模型的 MMEB-V2 上带来一致增益。
结论:推理增强嵌入并不普适,用分数结构路由按查询分流推理是更优解。
「多模态」频道最新
- AI 视频即游戏引擎:PixVerse R2 用单一因果主干实时生成世界 — future_coded · 2026-09-25
- 视频生成加“micro expressions”提示词,角色情绪更细腻 — R34vspec · 2026-09-25
- 用户用 Opus 5.5 为旧素材生成音乐视频,效果获好评 — repligate · 2026-09-25
- 同一 prompt 复测:Opus 5.5 一次生成完整视频,博主称真·one shot — drrickio · 2026-09-25
- 给 Claude Agent 接 Runway MCP,一条提示词产出 Netflix 风格纪录片 — CurieuxExplorer · 2026-09-25
- Seedance 2.5 携手 GPT Image 2.5,一镜搞定科幻经典对决 — CurieuxExplorer · 2026-09-25