115M参数mLateOn登顶多语言ColBERT检索,媲美8B稠密模型
IgorCarron · x · 2026-08-20
LightOn 发布的 mLateOn(115M 激活参数/312M 总参数)在 HAKARI-Bench 上登顶多语言 ColBERT 式检索:Overall Macro 65.52,领先第二名 pplx-embed-v1-late-0.6b 达 8.33 分,而激活参数仅约其四分之一。它结合多语言 mmBERT 编码器与 ColBERT 式 token 匹配,支持最长 8192 token 输入,并可在 MNanoBEIR 上取得 63.33 分,介于 Qwen3-Embedding-8B(62.87)与 Nemotron-3-Embed-8B(64.28)两个 8B 稠密检索模型之间。
所属事件:LightOn 发布 115M 参数模型 mLateOn 登顶多语言检索(4 条相关)→
「研究」频道最新
- 五药企联邦训练 OpenFold3:2 万私有结构数据不外泄提分 11 个点 — jiqizhixin · 2026-10-16
- 新水印框架 SWAN 把签名藏进句义,改写也难抹掉 — burkov · 2026-10-16
- 可解释性圈起争执:"神经网络本就干净"结论被指夸大 — aryaman2020 · 2026-10-16
- LayerTrim:免训练剪枝保住推理模型 AIME 能力 — SeoulNatlUniv · 2026-10-16
- Simular 在 BayLearn 展示神经符号化计算机使用 Agent — xwang_lk · 2026-10-16
- Google 量子负责人 Neven 谈芯片测试争议并计划把大脑连上量子计算机 — Chris_Armstrong · 2026-10-16