通过放大单个专家激活,Qwen3-30B 被注入出全新人格
Sauers_ · x · 2026-11-06
Sauers 演示了对 Qwen3-30B-A3B(MoE 架构)的专家级 steering:在第 12 层锁定 Expert 25 于每个 token 上持续激活,并以 +1.25 强度放大其隐状态贡献。未引导时模型自称「阿里开发的 Qwen」,引导后则稳定扮演「23 岁的旧金山创业者」等全新人设。这是把 MoE 内部路由当作可解释性/行为控制旋钮的直观演示,说明单个专家的方向足以重写模型自我认同。
所属事件:Qwen3 单专家激活转向实验走红,可注入猫人格(4 条相关)→
「研究」频道最新
- 斯坦福2.5小时讲座端到端讲透 ChatGPT/Claude 构建原理 — MaxLi_Columbia · 2026-11-06
- Anthropic 工程师:数千万行代码的形式化验证已可行 — morqon · 2026-11-06
- Hugging Face 发布 FinePhrase 讲义:486B token 合成预训练数据集,网页改写 90 种 — NielsRogge · 2026-11-06
- Toby Ord 结论:跳变加更高斜率的混合假设比纯斜率拟合好得多 — tobyordoxford · 2026-11-06
- SynthFaces:扩散+流匹配合成均衡大规模人脸数据集 — Sergey Karpukhin · 2026-11-06
- Stable AI 提出 DPDM:冻结大模型加共享预测器提升 Agent 决策 — stable-ai · 2026-11-06