独立研究者 11 组实验指激活转向测量几何有误,提出 AkbasCore 3.2
Nearby_Indication474 · reddit · 2026-09-25
一位独立研究者在 Qwen2.5-7B-Instruct 上做了 11 组实验(TESTS 152–162),指出激活转向(activation steering)存在测量问题:表征方向、自然信息流几何与因果干预方向常被混为一谈,但它们并非同一对象。
核心做法
- AkbasCore 将「往哪推」(单位转向方向 Compass)、「推多强」(SEASC 物理剂量 ρ)与「剂量随深度变化」(DRA 包络 E(L))三个控制解耦,干预形式为 h' = h + ρ·||h||·A。
- TEST 152:无扰动下测得跨层隐状态协方差强低秩——L3→L19 的 top-8 跨协方差能量约 95.3%(k90=6),主成分余弦在 k=32 时达 0.982,像一条低维「运输高速公路」。
- TEST 153:该自然结构并非无意义——在 L6 源层 0.25% 扰动剂量下,真实方向 Q=0.05149 对比零假设方向 Q=0.02982,比率约 1.73(p=0.0001),具有真实因果特权;但这种特权在网络深层基本消失。
作者称多个自己的假设在实验中被证伪,最终迭代出 AkbasCore 3.2。这是未经同行评审的独立研究,结论需谨慎看待。
「模型」频道最新
- 用户实锤 Codex 定额消耗异常:任务一夜吃掉 $200 套餐 30% — sethlazar · 2026-09-25
- 马斯克放话 SpaceXAI 半年登顶,网友回怼:别低估 Cursor 团队 — RachelVT42 · 2026-09-25
- 用 Claude Opus 5.5 造出虚幻引擎 ARPG,作者亲试直呼圆梦 — minchoi · 2026-09-25
- 随手一句 prompt,Opus 5.5 一发出高质量视频 — minchoi · 2026-09-25
- Opus 5.5 发布仅两天,10 个脑洞案例刷屏 AI 圈 — minchoi · 2026-09-25
- 开发者盛赞 Anthropic Opus 5.5:称其进步幅度堪比当年 Fable — RileyRalmuto · 2026-09-25