JHU 团队发布 InterviewPlayground:仿真评估 AI 面试官,相关系数达 0.86
anjalie_f · x · 2026-10-27
Johns Hopkins 大学与 Listen Labs 团队(Anjalie Field 等)发布预印本 InterviewPlayground,一个用于评估 AI 面试官的仿真环境,代码开源于 GitHub。要点:- 针对 AI 面试官这类多轮、需适应受访者的对话系统难以评测的问题,用基于社会理论的模拟受访者做仿真访谈,产出 InterviewReportCard 评分;- 用 5 个 AI 面试官、3 个访谈主题、450 名真实人类受访者做 15 场真实定性研究,与仿真结果对比;- 仿真评估对真实人类研究表现的预测在 12 项指标上平均 Pearson 相关系数 0.86,并能复现真实研究中的行为分析关键发现;- 为对话式 AI 的验证型仿真评测提供了路线图。
「编程与Agent」频道最新
- Perplexity Decider 内部拆解:Isaac Flath 将直播讲解决策模型架构 — antoine_chaffin · 2026-10-27
- 开发者提出语音 agent 关键测试:能否听懂旁人对话不是对它说的 — gethackteam · 2026-10-27
- Claude Code v2.1.311 发布:修复 1M 上下文误报与子代理一堆顽疾 — ashwin-ant · 2026-10-27
- Grok Bot v0.75.8 发布:审批规则建议、日历接入与插件即时可用 — mark_k · 2026-10-27
- OpenAI 官宣:GPT-6.1 Sol 助力 CodeRabbit 扫描代码库安全隐患 — OpenAIDevs · 2026-10-27
- Nitro Modules v1 跑通 Node.js,一套原生模块通吃 iOS、macOS 与桌面 — Birchlabs · 2026-10-27