TRIAD 基准发布:多模态检索在层级、约束与多轮状态上全军覆没
_reachsumit · x · 2026-11-11
新论文 TRIAD 提出一个面向智能体场景的多模态检索 benchmark,覆盖三类此前被忽视的难点:概念层级抽象(视觉实例与不同层级概念的双向检索)、正负条件联合约束、以及跨对话轮次的状态整合与修订。基准含 6 个子集,每子集 1000 条查询、1000 条候选池,统一用 multi-positive mAP 评测。
主要发现:
- 共评测 17 个系统的 20 种配置,没有任何系统在全部 6 个子集上领先
- 层级距离越大性能越差
- 仅含负条件的查询普遍表现不如正条件查询
结论:当前多模态检索系统在复杂、演化的 agent 式请求下仍有明显短板。
「多模态」频道最新
- MiniMax H3 Image 上手实测:文生图与编辑同一权重 — ggbro_itsover · 2026-11-11
- H3-Image 实测:16GB 显存 35 秒出 8.41MP 大图 — mininuvixi · 2026-11-11
- Martine 基准发布：多视角 3D 表面重建跨视角、分辨率与光照评测 — ssh4net · 2026-11-11
- 用 AI 搭可漫游 3D 世界:纸鲤穿行三块大陆的首站Demo — techartist_ · 2026-11-11
- H3-FaceRefine-Plus 开源：小中尺寸人脸细节翻倍，附完整对比数据 — AnniCodex · 2026-11-11
- 一句话到 8 秒成片：Seedance 2 Mini 生成猫骑士大战石龙画面 — LinTorch · 2026-11-11