开发者推出 J-lens 可直接读取模型人格神经元
开发者 @a9lim 演示了可解释性新工具 J-lens(Jacobian lens),可直接读取模型内部神经元,配图展示了 pirate、horse 等人格相关神经元在 logit 层面的表现。其称完整仓库即将与 @treetowntree 一同开源。转发者认为该工具对模型优化非常重要,并期待进一步了解模型内部还有哪些结构。
2026-10-29 ~ 2026-10-29 · 2 条相关
- J-lens 实现神经元直接读取,可解释性新工具仓库即将开源 — burny_tech · 2026-10-29
- J-lens 可直接读出神经元人格词,仓库即将开源 — burny_tech · 2026-10-29