无需读论文:四步用本地小模型和 Claude 玩转 mech-interp

burny_tech · x · 2026-10-29

@neuralavb 分享机械可解释性(mech-interp)的极低门槛上手路径:只需能本地跑模型加一个好用的编码 agent 即可开始。步骤:1)准备一组 prompt 或对比数据集,前向传入可本地运行的小模型(如 Qwen3.5 的 0.8B/2B/4B 版本);2)从 dense 模型某一层取出所有神经元激活值;3)优先看 MLP 神经元,因为它们常有特权基(privileged basis);4)把激活数据直接丢给 Claude 等 LLM agent 分析特定神经元,也可配合主题检测等标准技术做手动分析。作者认为这是深度学习中最酷且入门门槛最低的领域之一。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →