AI-GENIE 方法用 LLM 自动生成并验证心理量表,五千人样本验证有效性
GolinoHudson · x · 2026-11-05
弗吉尼亚大学 Hudson Golino 团队在 Behavior Research Methods 发表开放获取论文 AI-GENIE（Automatic Item Generation and Validation with Network-Integrated Evaluation）：用 LLM 自动生成心理测评条目并用网络心理测量学技术筛选验证，大幅减少对专家的依赖。
- 方法：用 Mixtral、Gemma 2、Llama 3、GPT-3.5、GPT-4o 生成模拟大五人格量表的条目池，结合网络心理测量学指标自动评估条目质量与冗余度。
- 验证：在 5 个美国全国代表性样本（合计 N=4,964）上实证测试，AI-GENIE 生成的量表达到结构性效度标准。
- 背景：论文回应了「不该用 AI 快速做测评」的告诫——作者立场是「用对的工具其实可以」，该框架为心理测量学研究提供了自动化的条目生成与验证流程。
「研究」频道最新
- VTR 方法让 VLM agent 少用 5.8 倍视觉 token 且精度不变 — wellecks · 2026-11-05
- Flex-RSI 基准问世：量化前沿智能体的递归自我改进能力 — _vztu · 2026-11-05
- 四代蛋白质生成模型演进：从骨干生成迈向全可编程蛋白质设计 — AllThingsApx · 2026-11-05
- ProteinMPNN 或因记忆跨膜蛋白折叠，加噪后即失识别 — sokrypton · 2026-11-05
- lm-eval 多选题评测踩坑：强指令模型不按格式答，regex 抓错字母 — mancubus77 · 2026-11-05
- iPhone 年年变强的直觉为何不适用于进化:没有可并行性 — louisvarge · 2026-11-05