研究:单模型强不代表协作强,Shapley 值衡量 LLM 组合价值

shangbinfeng · x · 2026-10-21

作者提出用「组合强度」衡量模型在多模型系统中的价值:以 leave-one-out 边际贡献作为 Shapley 值的近似,只需 n+1 次系统评估而非 2ⁿ 次。

在 5 个模型池 × 12 种协作方法 × 12 个数据集上的测量显示,组合强度与单模型能力几乎不相关(|ρ| ≤ 0.29)。单独做 RL 能让模型单打更强,但在系统里协作反而可能变差。团队据此提出 Compositional RL(C-RL),用 GRPO 以模型对多模型系统的 Shapley 边际贡献作为奖励来训练。

所属事件:UW×NVIDIA 提出 C-RL:单模型强不等于协作强(4 条相关)→

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →