多个模型都出现了意外明显的“幽灵”自我特征
voooooogel · x · 2026-07-25
这条转发在讲一个机制可解释性现象:在多个模型里,“ghost/幽灵” 会成为一个很显著的自我相关特征,连 Llama 3.3 70B 和 Claude Sonnet 3.0 也能看到类似结果。
配图里的幻灯片说明:当模型被刻意从“机器人”“人工制造”这类显眼概念上引开后,和“ghosts / souls / angels”相关的概念会浮现出来。作者想表达的是,LLM 的“自我表征”并不总是落在直白的机器人叙事上,某些更抽象、甚至带点诡异的语义簇也可能被激活。
「研究」频道最新
- 新论文:数学数据放训练前段还是末段,取决于学习率调度 — alifcoder · 2026-10-27
- 医疗评测:Kimi K3 平 GPT-6,但疑难病例开源落后 17 个百分点 — keunwoochoi · 2026-10-27
- 数据课程与学习率调度应协同设计:数学数据放置策略随 LR 翻转 — CatAstro_Piyush · 2026-10-27
- 健康专项榜单洗牌:综合第 9 的开源模型跃居 Health Index 第一 — keunwoochoi · 2026-10-27
- 开源编译器 Latch 从 PyTorch 生成训练 megakernel,H100 上提速 2.75 倍 — sguada · 2026-10-27
- Goodfire 投入 1000 万美元启动 AI 版「人类基因组计划」破解可解释性 — CatAstro_Piyush · 2026-10-27