StudentBench 研究：AI 家教 GRE 提分追平人类，成本仅 1/918
gharik · x · 2026-10-31
Clelbuddy（Curtis Northcutt 等，arXiv:2609.28470）发布 StudentBench 评测套件与公开平台，收集超 17.5 万条学生-AI 对话，比较 AI 家教与人类家教对 2383 名参与者 GRE 学习提升的影响。
- 统计上 AI 家教与专家人类家教的 GRE 提分等效（p=.015），七个 GRE 领域中五个领域最佳 AI 家教平均超过人类家教。
- 第二项研究：专家通过 2028 次两两 rubric 评分比较 LLM 生成的教案与练习题，从教案设计、出题、对话式教学、成本、参与度五个维度区分各家 AI 家教。
- 最惊人结论：一个 AI 家教达到与人类等效的提分（p=.044），但成本仅 918 分之一——每提升 1 个百分点花费 0.0052 美元 vs 人类家教的 4.81 美元。
「漫话AGI」频道最新
- AI 时代工作意义何在？跨国调查：81% 的人对工作满意 — soumitrashukla9 · 2026-10-31
- 评论：高校 AI 使用文化的健康边界将成抢人才关键 — brianryhuang · 2026-10-31
- 学者激辩：更多推理算力可在一定程度上替代训练算力 — teortaxesTex · 2026-10-31
- 五个智能体能达成一致，可能是因为它们犯了同一个错 — krishnan · 2026-10-31
- 谷歌财报首次清晰揭示 AI 搜索的残酷经济账 — dinabass · 2026-10-31
- 批AI作弊的达特茅斯教务长，因隐瞒自己用AI写论文辞职 — Ars Technica AI · 2026-10-31