通过 Qwen3 单个 MoE 专家转向,一句话把模型变成剑桥数学家

Sauers_ · x · 2026-11-06

配图展示了 Qwen3-30B-A3B 的激活转向(activation steering)演示:在第 12 层对每个 token 都激活的 Expert 115 施加强度 -1.5 的转向向量(相当于 1.5 倍隐藏态大小的反向偏置),模型自我介绍从「我是阿里巴巴开发的 Qwen」变成自称剑桥数学专业、研究微分方程的「专业人士」。作者还尝试了 240 个随机方向向量,找出最能产生连贯人设的几个,并发起「tag yourself」互动。

所属事件:Qwen3 单专家激活转向实验走红,可注入猫人格(4 条相关)→

原文链接 →

「Fun」频道最新

更多「Fun」频道 AI 资讯 →