阿里发布 MIPR 基准:3522 条多模态查询测「意图找品」检索
_reachsumit · x · 2026-11-18
阿里巴巴发布 MIPR 基准,针对真实电商中「用户表达意图但不点名商品、且一个意图可由多品类商品满足」的检索场景。
- 规模:3522 条多模态查询 + 30731 个商品的共享语料,特点是推理密集型检索、多品类解、细粒度相关性标注
- 结果:最强 embedding 检索器在全量查询上仅得 49.23% nDCG@10,多解查询的 solution-category recall@10 为 55.86%;重排后提升至 60.11% 与 67.00%,但距候选池 oracle 仍有明显差距
- 结论:MIPR 是一个有诊断价值的高难度基准,数据与代码已公开(Hugging Face + GitHub)
「研究」频道最新
- TCS 学界发布声明:招聘重质量轻数量,抵制 AI 论文军备竞赛 — fortnow · 2026-11-18
- 论文提出语言创造性的社会文化视角:从社区实践看创意生成 — abenitezburraco · 2026-11-18
- 无需训练或梯度:27B 模型可自行改写权重提升 unseen 任务 — udmrzn · 2026-11-18
- 开源 EDA 工具十年逆袭:从「不可能」到设计出蓝牙信标芯片 — IgorCarron · 2026-11-18
- AURA 2.0 发布:流式视频模型学会主动开口说话并调用工具 — Shuhan Li · 2026-11-18
- Orabona 撰文驳 AdaGrad 预条件化解释:全矩阵界限常不如标量学习率 — bremen79 · 2026-11-18