Sentence Transformers 推出 SparseEncoder:稀疏嵌入几行代码上手
tomaarsen · x · 2026-09-17
tomaarsen 介绍 SparseUp 系列线程的第三条:Sentence Transformers 新增 SparseEncoder 接口,新发布的 Linkup-sparseup-embed-v1 完全兼容。
- 稀疏编码器特性:绝大多数维度为 0,大规模检索效率高;非零维度对应具体 token,比稠密嵌入更可解释;可与稠密嵌入组合做混合检索
- 用法示例:SparseEncoder("naver/splade-cocondenser-ensembledistil") 加载模型,encode() 生成 [3, 30522] 稀疏向量,similarity() 默认点积计算相似度
- 提供 sparsity() 统计稀疏率(通常 >99%)与平均激活维度;支持 promptname 或 encodequery() / encodedocument() 区分查询与文档的专用提示
教程地址见 Sentence Transformers 官方文档。
所属事件:Linkup 开源 SparseUp:149M 参数稀疏检索模型登顶 BEIR-13(12 条相关)→
「模型」频道最新
- AWS 开源 Strands Harness 宣称比 Claude Code 便宜 45%,搅动 harness 之争 — blaizedsouza · 2026-11-02
- Yacine 赞誉 Terra High:一条推文引爆的新模型口碑 — yacineMTB · 2026-11-02
- 单卡 H200 跑 DeepSeek V4.1,时租仅 5.3 美元 — daluoseo · 2026-11-02
- 曝 Fable 5.5 最新 checkpoint 视频流出,纯代码生成 — kimmonismus · 2026-11-02
- 用户实测 Claude Opus 5.5 行为异常,引出持续学习难题 — JeremyNguyenPhD · 2026-11-02
- Reddit 热帖追问:为何主流 AI 模型集体忽略冰岛女性罢工 — Mathemodel · 2026-11-02