清华等提出“代表性平等”指标,揭示 LLM 模拟不同国家人群的偏见
zibuyu9 · x · 2026-08-21
清华大学等机构在《Computational Linguistics》发表研究,探讨 LLM 作为人类代理在跨国调查中的表现。论文引入了“代表性平等”概念及指标 EqCV,测试了 9 个开源模型在 59 个国家和 2420 个子群体中的表现。研究发现,模型准确率与平等性不同:GLM-4-9B 准确率最高(0.739)但平等性较差,而 ChatGLM3-6B 在平等性和综合 AE 分数上领先。这表明高平均性能并不意味着对不同人群的公平覆盖。
「研究」频道最新
- WEDGE 论文:把导航失败经历变成可学习的训练环境 — _akhaliq · 2026-10-16
- RExBench 基准:最强编码 Agent 自主完成研究扩展成功率仅 33% — najoungkim · 2026-10-16
- Google 发布 CLASHarness:基准测试多智能体冲突下的计算机操作能力 — google · 2026-10-16
- 清华团队证明:普通 Flow Matching 采样无法突破固定深度模型表达力上限 — SQZ · 2026-10-16
- APEX-Harm 基准:共享工作区中脚本注入攻击对智能体成功率居高不下 — KAUST · 2026-10-16
- USC 研究:智能体 residual stream 状态可预测并拦截越权动作与事后撒谎 — USC · 2026-10-16