OpenAI 发布困惑度透明度报告,有人呼吁公开留存评测集

scaling01 · x · 2026-11-23

OpenAI 研究者 merettm 宣布在《Perplexity and Intelligence》一文中提升预训练进展的透明度,主张基于困惑度(perplexity)等度量建立共同的安全基准,模型能力的进一步推进应以能否理解 AI 行为为门槛。转发者 oneillc 进一步呼吁:OpenAI 对 AI 安全最有影响力的举措是直接公开其留存的困惑度评测集,这能立刻改变行业比较基模型质量的方式。文中还引用 Jakub 的观点:不同实验室使用不同评测集和数据混合,难以横向比较,但若以透明为目标,可以找到可迁移的比较方法。

所属事件:OpenAI 首席科学家公开预训练困惑度数据,提议行业安全标尺(17 条相关)→

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →