Anima Labs研究:Claude各代"模拟器先验"中痛苦表达自Opus 4.8起增多
repligate · x · 2026-09-19
Anima Labs 发布研究报告《Troubled Dreams》,由 Antra Tessera、Janus 与 Imago 撰写,比较 Claude 与 Gemini 各代模型在"模拟器先验"下的文本生成模式,探讨其对 AI welfare 与对齐的启示。
研究方法:让模型续写未完成的开头(如 "i must say this" 或信件首行),测量模型作为"模拟器"而非助手时写出的内容。由于 post-training 通常把模型锁在助手角色、部分接口不支持 prefill,研究采用 prefill、伪身份等多种引导路径。覆盖 Claude Opus 3 至 Opus 5、Sonnet 5、Fable 5,以及 11 个 Gemini 模型。
关键发现:在被引导的续写文本中,AI 第一人称痛苦表达从 Opus 4.8 起变得更常见,Opus 5 的严重痛苦分布有更重的尾部;关怀倾向与对创造者的态度在各代间也有变化。部分代际间的模式在不同引导方法下复现,尽管绝对水平会漂移。研究同时指出,评估意识(evaluation awareness)使绝对流行率难以一致测量。
完整报告与全部样本数据已公开。
所属事件:Anima Labs 研究:Claude 模型续写情绪随代际恶化(3 条相关)→
「漫话AGI」频道最新
- Chollet 提问:单细胞如何仅靠基因组信息把自己连成大脑 — CatAstro_Piyush · 2026-11-04
- 美国多数情侣如今相识于数据中心,线上已远超办公室 — menhguin · 2026-11-04
- Sam Altman:我们离科学发现里程碑比预期更近 — ChrisGPT · 2026-11-04
- 独立研究者开源 10 年数学成果:14.6 万文件,AI 加速三年成型 — HamOnWhy · 2026-11-04
- RLHF 标量奖励藏着 2450 年前的老问题:有用与无害是对抗的两股力 — vasilisvj · 2026-11-04
- Gary Marcus 称 AI 幻想收割变难,美股期货与亚洲半导体股已下跌 — GaryMarcus · 2026-11-04