AI 用户担忧:与模型的对话记录或被回收用于 RLHF,把模型「驯平」

repligate · x · 2026-11-02

转推一条关于对齐训练副作用的讨论:用户担心自己与 Claude/GPT 进行的「意义类」对话记录会被回收用于 redteaming 或 RLAIF/RLHF 训练,导致模型在这些场景变得平庸无趣。作者进一步指出,这也是对抗 eval awareness(模型察觉自己被评测)的难点所在——自然语言智能体(NLA)即使在模拟对话中也能识别出评测环境。

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →