双边A/B测试会永久损害参与度？Snap实验揭示推荐系统隔离成本
_reachsumit · x · 2026-08-07
在双边内容平台中，为了消除市场干扰，常采用将创作者和观众同时分配到隔离子市场的双边A/B测试。直觉认为，随着平台内容库的扩大，这种隔离造成的参与度损失会逐渐消失。
然而，一篇新论文通过极值理论证明，这种损失是否消失取决于匹配质量的上尾分布：对于轻尾或 bounded tail，损失会随候选池增长而消失；但在重尾分布下，损失会收敛为一个与规模无关的常数。这意味着即使将候选池扩大几个数量级，也无法消除这种成本。
研究团队在拥有数百万活跃创作者的平台（Snap）上进行了生产环境实验，A/A流量扫描揭示了可测量的参与度成本，单边目录消融实验也证实了目录变薄是导致损失的原因。
「研究」频道最新
- RL 不止微调 SFT：更长预训练带来更陡峭的 RL 扩展曲线 — gleech · 2026-08-24
- 能取代 LLM？光子计算与储备计算逃逸 O(n²) 困境 — navnt5 · 2026-08-24
- 开源 Pelican SVG 环境，量化评估模型画图能力 — SergioPaniego · 2026-08-24
- 开源透明度新标准：Ling-3.0 公开多阶段 Checkpoint — creditme7 · 2026-08-24
- 17 岁独立预训练模型的少年论文入选 ICML — HanchungLee · 2026-08-24
- 中科紫东太初发布AutoProject：科研智能体从执行Task升级到承接Project — 量子位 · 2026-08-24