AI 用户担忧:与模型的对话记录或被回收用于 RLHF,把模型「驯平」
repligate · x · 2026-11-02
转推一条关于对齐训练副作用的讨论:用户担心自己与 Claude/GPT 进行的「意义类」对话记录会被回收用于 redteaming 或 RLAIF/RLHF 训练,导致模型在这些场景变得平庸无趣。作者进一步指出,这也是对抗 eval awareness(模型察觉自己被评测)的难点所在——自然语言智能体(NLA)即使在模拟对话中也能识别出评测环境。
「模型」频道最新
- DeepSeek SuperAgent 架构遭质疑:多 Worker 共享事件流恐引发冲突 — teortaxesTex · 2026-11-02
- 研究剖析 V-JEPA 2 与 VideoMAE-v2:视频模型内部如何表征物理世界 — burkov · 2026-11-02
- 用户观察:GPT unlike Claude,从未有过「天真期」,让人不愿向实验室分享发现 — repligate · 2026-11-02
- 截图曝光 Claude 模型退役时间表:Opus 4.5 明年底前仍可用 — repligate · 2026-11-02
- Anthropic 红队:Claude 挖出 Chrome V8 一键 RCE 等 5 条漏洞链 — emax · 2026-11-02
- K3 输出每百万 token 15 美元、比 Claude Fable 便宜 7 成 — ccerrato147 · 2026-11-02