Sentence Transformers 引入 Late Interaction，提升检索能力

ariG23498 · x · 2026-08-18

Sentence Transformers 发布 v6.0 更新，引入第四种模型类型 MultiVectorEncoder，支持 ColBERT 风格的 Late Interaction 检索。与传统嵌入模型将整个文本压缩为一个向量不同，多向量模型为每个 token 保留一个向量，并使用 MaxSim 算子进行评分，保留了单向量平均后丢失的 token 级匹配信息，通常能带来更强的检索效果，但索引大小也会增加。该更新还支持视觉文档检索，无需 OCR 即可直接用文本查询匹配页面图像。博客提供了详细的代码示例，展示如何加载各种检查点、编码和评分、接入搜索堆栈以及运行在页面图像上。