Sentence Transformers 支持模型合并,60/40 加权融合两个 MiniLM
tomaarsen · x · 2026-10-29
Sentence Transformers 维护者 tomaarsen 演示了新的模型合并功能:无需再训练,即可将兼容的 checkpoint 直接合并。示例代码展示对 all-MiniLM-L6-v2 与 multi-qa-MiniLM-L6-cos-v1 做 linear 方法、权重 0.6/0.4 的加权平均,合并后保存并正常编码文本,输出维度 (2, 384)。作者表示同基座模型微调出的 checkpoint 合并效果较好。
所属事件:Sentence Transformers 新增免训练模型合并功能(2 条相关)→
「模型」频道最新
- Mistral 开源万亿参数 Le Chonk,人工偏好评测胜 GLM 5.3 与 Kimi k3 — b_roziere · 2026-10-30
- TRL v1.17 发布:支持 Mistral Large 4,单节点 1T 参数跑 LoRA 微调 — SergioPaniego · 2026-10-30
- Agent Arena 实测:GPT-6.1 Sol 单任务成本仅 Claude Opus 5.5 的 15% — arena · 2026-10-30
- Agent Arena 实测:GPT-6.1 Sol 单任务 $1.91,比榜首便宜 85% — arena · 2026-10-30
- 英国用户 £0 ChatGPT Plus 试用账单显示已支付,Plus 却始终未开通 — Afraid_Gazelle1184 · 2026-10-30
- LlamaParse Agentic 文档解析实测 179/179 满分超前沿 VLM — llama_index · 2026-10-30