PersonalQuery-Benchmark:6516 条查询实测个性化表达差异如何扰动检索排序
_reachsumit · x · 2026-10-26
arXiv 论文发布 PersonalQuery-Benchmark (PQB),评估检索对"个性化表达差异"的鲁棒性:
- 现有个性化检索研究关注用户偏好与查询意图,较少关注不同用户表达同一需求时的句法与书写错误差异;真实数据也缺稳定身份与长期表达历史。
- PQB 从用户历史文本建模个性化句法表达和书写错误,覆盖 3 个 Amazon 商品域、共 6,516 条查询实例,质量经 LLM 评估与独立人工评估验证。
- 评测了 5 种架构的检索模型 (词法、学习式稀疏、稠密双塔、late-interaction、混合) 和 2 个 LLM 排序模型。
- 发现:即便信息需求固定,个性化表达差异仍引起可测的排序变化,不同模型敏感度差异明显。
「研究」频道最新
- CoRL 论文:VLA 机器人策略单步推理即可匹敌多步,动作生成提速 1.6~4.8 倍 — kaixhin · 2026-10-26
- 生物模拟为何难:参数敏感性普遍「马虎」,精确测量常非关键 — rbhar90 · 2026-10-26
- LessWrong 长文论证:计算逻辑反事实难题让 FDT 难以成立 — jessi_cata · 2026-10-26
- 学者纠错:别再误用苦涩教训论证暴力模拟将解决生物学 — anshulkundaje · 2026-10-26
- Chain Theory:用 AI 从量子信息重建基础物理,找到无参数精细结构常数候选式 — skdh · 2026-10-26
- 港浙复三校联手 Lightspeed 推 HiSTEVE:VLA 智能体键鼠操控玩转 Minecraft — tencent · 2026-10-26