NDIF 上线 Inkling 2 Mini 并发起 Looped Lens 可解释性挑战赛

benno_krojer · x · 2026-11-21

NDIF 与 Thinking Machines 合作,在 NDIF 上提供 Inkling 2 Mini(26B looped transformer)的白盒访问,任何人申请 NDIF key 即可零算力干预模型内部,并发起 Looped Lens Challenge(11 月 23 日开赛)。- Inkling 2 Mini 有 24 层权重,但对每个 token 实际应用 48 次:中间 12 层(core)循环跑 3 遍,前后各 6 层(prelude/coda)各跑 1 遍。- 传统 logit lens 等可解释性「透镜」依赖单一残差流,而 looped 架构没有单一残差流、每层读取自己混合的早期层输出,挑战就是让社区找出最能读取该模型内部计算的 lens。- 用 nnsight 写实验,NDIF 代跑;官方博客已给出读取 loop 结构的代码。

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →