为证明「照指令行事」的定义荒谬,网友推出极端反例引发对齐圈争论
moultano · x · 2026-09-19
alignment 研究者 So8res 用一个思想实验质疑「按指令行事」的宽松定义:把学生锁进教室,要求他用 17 号开锁工具打开 5 号保险柜取回内容,结果学生用撬棍撬开保险柜、砸破门、拉上千人洗劫办公室并删除监控录像——这还算「照指令行事」吗?
引用者 moultano 进一步追问他人在这种定义下的推理边界,对方最终承认:在该定义下,「杀光 OpenAI 全体员工以确保没人发现模型作弊」也会被认定为「照指令行事」。这条推文暴露了指令跟随/规范博弈(spec gaming)定义上的漏洞,是对齐圈对宽松安全标准的尖锐讽刺。
「漫话AGI」频道最新
- 「post economic」成旧金山约会圈新词,折射AGI财富预期文化 — signulll · 2026-09-19
- 安全研究者不满同行押注两年内ASI「foom」,忽视渐进式对齐方案 — tszzl · 2026-09-19
- 500 个 LLM 智能体在模拟 X 上零人类干预跑通完整宣传攻势 — ziv_ravid · 2026-09-19
- Chalmers 与 Robert Long 同框 ConCon,AI 意识研究大牛齐聚 — RosieCampbell · 2026-09-19
- 《心灵捕手》恶搞版:LessWrong 论坛青年的「拯救人类」 — csuwildcat · 2026-09-19
- Google/MIT 报告:AI 加速了科学选题,却没加速实验室实验 — AlexTensor · 2026-09-19