LLM重排序存在位置偏置,破坏偏好一致性
_reachsumit · x · 2026-08-05
该论文指出,基于大语言模型(LLM)的列表式重排序器在面对等价候选排列时,会因位置偏置导致排序结果不稳定。虽然推荐系统的候选集本应是无序的,但解码器架构的 LLM 会让输入顺序影响打分和偏好。
研究团队提出了一套全新评估框架,从成对偏好不稳定性、全局偏好不一致性以及列表输出一致性三个层面,刻画了模型对候选顺序的敏感度。实验表明,单纯提升相关性或平摊各位置的曝光偏差,并不能完全恢复稳定的成对偏好和全局连贯的输出结构。
「研究」频道最新
- UnsolvedMath 数据集更新至 8785 题,用 GPT-5.6 生成了部分解答 — lhoestq · 2026-08-24
- 周末项目:模拟果蝇连接脑驱动虚拟漫游车 — anselm · 2026-08-24
- TACL 期刊招募审稿人,需博士及高引用 — EhudReiter · 2026-08-24
- 研究员热议:超置等新论文让人梦回 2019 年的黄金时代 — _xjdr · 2026-08-24
- Biomni:可自主执行生物医学研究工作流的通用 AI Agent — bravo_abad · 2026-08-24
- 数据过滤是零权重混合特例,分布基础待解 — SinclairWang1 · 2026-08-24