开源工具 logos-theodolite:可视化探索 LLM 逐层内部状态

New_Alps_5655 · reddit · 2026-10-20

Reddit 用户发布开源项目 logos-theodolite,一个用于探索 LLM 内部机制的可视化仪器,结合了 jspace、j++、LARQL/VINDEX 和 Cammarata 的神经元极点等最新可解释性研究。配套的 j-lenses 原为 gemma4-31b 拟合,作者重新拟合后认为不值 GPU 时间,现直接用于指令微调版本。工具可逐层展示模型注意力与记忆(attention vs feed-forward)比例、每层候选 token 分布和最活跃神经元。作者还顺带爆料称该项目里 Opus 5.5 疑似被路由到了 Fable 5.5。

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →