GPT-4 对未发表社会科学研究仍保持高相关性
RobbWiller · x · 2026-07-23
模型对比
这条补充显示，GPT-4 的预测并不只是“记住了已发表结果”。即便实验在训练截止前未公开、甚至到 2025 年 6 月 仍未发表，相关性依然很高。
稳健性
- 图中 GPT-4 的相关性大致在 0.92 左右
- 多个社会科学子领域都保持了较高一致性
- 开源权重模型也表现不错，图里大约在 0.81–0.86 区间
结论
作者想证明：这类结果不太像纯粹的“训练集泄漏”，而是模型确实学到了一些可迁移的预测模式。
所属事件:Nature 研究：GPT-4 可高准确度预测社科实验结果(18 条相关)→
「研究」频道最新
- 新论文:数学数据放训练前段还是末段,取决于学习率调度 — alifcoder · 2026-10-27
- 医疗评测：Kimi K3 平 GPT-6，但疑难病例开源落后 17 个百分点 — keunwoochoi · 2026-10-27
- 数据课程与学习率调度应协同设计：数学数据放置策略随 LR 翻转 — CatAstro_Piyush · 2026-10-27
- 健康专项榜单洗牌：综合第 9 的开源模型跃居 Health Index 第一 — keunwoochoi · 2026-10-27
- 开源编译器 Latch 从 PyTorch 生成训练 megakernel，H100 上提速 2.75 倍 — sguada · 2026-10-27
- Goodfire 投入 1000 万美元启动 AI 版「人类基因组计划」破解可解释性 — CatAstro_Piyush · 2026-10-27