Turn Trout 力证:steering 向量本就是机械可解释性的开山干预手段

Turn_Trout · x · 2026-10-20

针对「steering vectors 不属于 mechinterp」的说法,研究者 Alex Turner(Turn Trout)强烈反驳:steering vectors 曾经就是 mechinterp 的核心——在他的迷宫求解策略网络项目中,这是他尝试的第一种干预手段,而且正是 shard theory 让他预判它可行。他附上了 2023 年的论文《Understanding and Controlling a Maze-Solving Policy Network》:团队在 3.5M 参数、15 层卷积的迷宫求解网络中找到一个残差通道,仅将单个激活设为 +5.5 就能让智能体可靠地驶向迷宫中指定位置,实现了不经微调就代数式修改网络运行时目标,并发现了深层的「动机 API」用于重定向 agent 目标。

所属事件:Alex Turner 反驳 steering 向量不属于机械可解释性的说法(2 条相关)→

原文链接 →

「安全」频道最新

更多「安全」频道 AI 资讯 →