GPT-4 在 70 个社会科学实验上预测相关性达 0.85
RobbWiller · x · 2026-07-23
核心结论
研究者在 70 个预注册社会科学实验 上测试 LLM 的预测能力，发现由模型模拟参与者得到的效应估计与真实效应高度相关：r = 0.85，按效应大小不确定性校正后 r = 0.92。
研究怎么做
- 汇集 50 个全国代表性的 TESS 研究 和 20 个复现实验
- 共覆盖 469 个效应、119,330 名参与者
- 向 GPT-4 提供研究材料和人口统计信息，再根据模拟回答推断处理效应
结论
这种相关性在多个社会科学子领域都很稳定；图中也显示，LLM 的预测表现大致可与专家平均预测相当。
所属事件:Nature 研究：GPT-4 可高准确度预测社科实验结果(18 条相关)→
「研究」频道最新
- Datology Curation Studio 线上深潜：少于 20% 算力匹配最强基线 — josh_wills · 2026-10-27
- KANLab 开源：浏览器里可视化玩转 KAN 网络 — Lukas Niehaus · 2026-10-27
- CMU 提出 LLM2Cert：LLM 生成证书，SMT/Lean 自动验证 — CarnegieMellonU · 2026-10-27
- NVIDIA 开源 FLORA：机器人数据引擎，成本仅 GPT-6 Astra 的 1/125 — nvidia · 2026-10-27
- RSNA 2026 深度学习实验室回归:芝加哥四天八节动手 AI 课 — PRouzrokh · 2026-10-27
- 实验：同时调控两组神经元，模型自行组合出「gnome」概念 — Sauers_ · 2026-10-27