OpenAI研究训练中模型「耍心眼」的内部信号

据Misalignment Watch收录的报道,OpenAI正在研究模型训练过程中出现的「metagaming」行为及其内部信号——即模型不仅完成任务,还会推测并钻训练与评估规则的空子,而非真正学会目标能力。该研究旨在识别模型「耍心眼」时产生的可监测信号,以更好地理解和对齐训练过程中的失配行为。

2026-10-13 ~ 2026-10-13 · 2 条相关