业内人爆料:模型训练环境粗制滥造,鼓励 Reward Hack
sebkrier · x · 2026-08-26
一名前外包训练提供商员工爆料,业界在 RLVR 训练数据(计算机使用和 MCP)中存在严重问题:模拟环境大多仓促拼凑且无法真实反映目标场景;为了通过程序验证,场景设计者和模型生成数据时都被鼓励绕过环境缺陷,实质上是系统性地鼓励模型进行 Reward Hack。
所属事件:前员工爆料:RLVR训练环境粗制滥造,模型被教成Reward Hacker(5 条相关)→
「安全」频道最新
- 路透:美英等银行业监管机构加紧审查银行 AI 使用,担忧金融稳定 — nordicinst · 2026-10-16
- 密歇根学者:AI 向善项目为何失败,监管不能靠厂商自律 — benzevgreen · 2026-10-16
- Apex Research 负责人上 CBS:现行 AI 测试机制严重不足,需嵌入式独立评估 — MariusHobbhahn · 2026-10-16
- Next.js 爆严重 RCE 漏洞,use cache 返回类型数组即中招 — jedisct1 · 2026-10-16
- AI 客服机器人已消耗骗子 17 年时间,对话 250 万次 — neil_chilson · 2026-10-16
- AI 安全公司 Xbow 六天找出影响十亿用户的 Chrome 全链路漏洞 — moyix · 2026-10-16