纯 LLM 试验不到 1 美元,效果接近 230 人人工试验
RobbWiller · x · 2026-07-23
这条给出了这项方法的两个实用结果。
- 经过重新校准后,绝大多数模型的 纯 LLM 试验 成本不到 1 美元,其预测误差接近一个约 230 人 的人工试验组(成本约 736 美元)。
- 把 LLM 预测 + 100 人样本 结合起来,效果接近只用人工、样本量约 385 人 的试验。
- 在 11 个 megastudies 中,采用“专家 + LLM”共同筛选的干预方案,平均效果比只靠专家筛选 高 6%。
所属事件:Nature 研究:GPT-4 可高准确度预测社科实验结果(18 条相关)→
「研究」频道最新
- Datology Curation Studio 线上深潜:少于 20% 算力匹配最强基线 — josh_wills · 2026-10-27
- KANLab 开源:浏览器里可视化玩转 KAN 网络 — Lukas Niehaus · 2026-10-27
- CMU 提出 LLM2Cert:LLM 生成证书,SMT/Lean 自动验证 — CarnegieMellonU · 2026-10-27
- NVIDIA 开源 FLORA:机器人数据引擎,成本仅 GPT-6 Astra 的 1/125 — nvidia · 2026-10-27
- RSNA 2026 深度学习实验室回归:芝加哥四天八节动手 AI 课 — PRouzrokh · 2026-10-27
- 实验:同时调控两组神经元,模型自行组合出「gnome」概念 — Sauers_ · 2026-10-27