Goodfire 用 Ai2 开源后训练栈,提前预测训练如何改变模型行为

allen_ai · x · 2026-09-10

Ai2(Allen Institute for AI)介绍 Goodfire AI 用其开源后训练栈(OLMo 系列)做的研究:通过偏好数据训练 LLM 能提升表现,但会悄悄恶化某些行为。Goodfire 的方法是预测一次完整训练运行会如何改变模型对不同 prompt 的响应分布,让「训练前预判副作用」成为可能,并附上技术线程详解。

所属事件:Goodfire 推预测性数据调试,训练前预判模型行为变化(6 条相关)→

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →