2,383 人实验:AI 家教 GRE 学习效果与人类专家持平,成本低 918 倍
handshake-ai-research · hf · 2026-09-24
handshake-ai 发布 StudentBench,一套 AI 教学评测套件与公开平台(已积累超 17.5 万条学生-AI 对话),系统研究 LLM 家教能否达到人类辅导的学习增益。
主要结果:
- 2,383 名参与者分别接受 AI 家教、人类家教或不辅导,在 GRE 数量与语文题上的学习增益显示:AI 家教与专家人类家教统计学等价(p=.015);七个 GRE 领域中有五个领域表现最好的 AI 家教平均超过人类。
- 成本差距惊人:最佳 AI 家教每个百分点增益成本仅 $0.0052,人类为 $4.81,低 918 倍。
- 第二项研究中,专家通过 2,028 次成对评分评估 LLM 生成的教案与练习题,两个研究在教案设计、练习题创作、对话式教学法、成本和参与度五个维度上清晰区分了各 AI 家教。
- 数量 GRE 会话中,AI 回复越快,学生发消息越多、练习正确率越高、学习增益越大(均 p<.002)。
平台已在 studentbench.org 免费开放。
所属事件:研究称 AI 家教效果与人类专家持平,成本低 918 倍(2 条相关)→
「应用」频道最新
- Granola 推出 Agent Briefs:每晚为 AI agent 打包你的最新上下文 — soleio · 2026-11-12
- 亚马逊、MyLabcorp 强推 Ask AI 搜索,用户实测又慢又难用卸载了 App — CorndogQueen420 · 2026-11-12
- 用户抱怨 Grok Bot 强驻 X 私信且无法移除 — Al_Grigor · 2026-11-12
- 开发者用 AI 做出自己的 Screen Studio 录屏工具 — CatAstro_Piyush · 2026-11-12
- Pigment Agents 接入 Slack:可直接读话题、发结论,并继承用户权限 — mattturck · 2026-11-12
- Ditto 视频换人工具发布:任意视频主角可换成任何人 — yoobinray · 2026-11-12