训练模型让激活值按指定 zig-zag 路径走,小型可解释性实验

Sauers_ · x · 2026-10-20

作者 @Sauers 展示了一个玩具级实验:可以直接训练模型,让其内部激活值沿 zig-zag(之字形)路径分布。配图给出了可视化结果。作者随后表示结果还不完美,计划增加训练数据、训练新模型以实现泛化,并预告会做「更酷」的泛化实验。

所属事件:研究者训练 Qwen3 内部表征走出锯齿路径(9 条相关)→

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →