MMTEB排行榜陷训练集数据污染争议

多模态文本嵌入基准（MMTEB）排行榜近期引发数据污染争议。有观察指出，SpartQA 和 MIRACL 等官方任务中，部分表现优异的模型（如 Harrier 系列）可能存在训练集污染。这种数据泄露导致排序结果看似出色但极具误导性，暴露了当前基准测试在评估模型真实能力时的潜在漏洞。

2026-07-15 ~ 2026-07-15 · 3 条相关

• MMTEB榜单疑有训练集污染 — antoine_chaffin · 2026-07-15
• MMTEB榜单受训练集污染 — antoine_chaffin · 2026-07-15
• Harrier在MMTEB榜单引争议 — antoine_chaffin · 2026-07-15