纯 LLM 试验不到 1 美元,效果接近 230 人人工试验
RobbWiller · x · 2026-07-23
这条给出了这项方法的两个实用结果。
- 经过重新校准后,绝大多数模型的 纯 LLM 试验 成本不到 1 美元,其预测误差接近一个约 230 人 的人工试验组(成本约 736 美元)。
- 把 LLM 预测 + 100 人样本 结合起来,效果接近只用人工、样本量约 385 人 的试验。
- 在 11 个 megastudies 中,采用“专家 + LLM”共同筛选的干预方案,平均效果比只靠专家筛选 高 6%。
所属事件:《Nature》称大模型可低成本预测社会科学实验(14 条相关)→
「研究」频道最新
- Science 论文把忆阻器漂移变成 2.12 毫秒神经动力系统 — jiqizhixin · 2026-07-23
- W&B 说世界动作模型会先“做梦”再决定动作 — wandb · 2026-07-23
- W&B 评测显示,NVIDIA 14B DreamZero 的难题表现被指标掩盖 — wandb · 2026-07-23
- NVIDIA 挑战赛冠军方案:记忆模式与推理时搜索验证 — NVIDIAAI · 2026-07-23
- 威斯康星大学获美能源部多项 AI 资助,攻关能源挑战 — KyleCranmer · 2026-07-23
- LMSYS 新训练法 OPD:让 Qwen3.5 推理提速 3 倍且精度提升 — ying11231 · 2026-07-23