MIT 提出权重空间编程,微调 0.0002% 权重即大幅提升模型能力
MIT CSAIL 的 Rikiya Takehi 等研究者联合 lateinteraction 实验室发布「Weight-Space Programming」研究,让 GPT-6 Astra 直接修改 Qwen 模型权重。实验显示仅改动约 0.0002% 的权重、无需常规训练,即可使模型数学成绩提升 6 倍,甚至超越原模型表现。该研究被视为探索权重空间直接编程的新方向。
2026-11-05 ~ 2026-11-05 · 2 条相关
- 第 1 集:MIT 论文:GPT-6 直改 0.016% 权重,小模型数学成绩提升 6 倍(2026-11-03,159 条)
- 第 2 集:编辑 0.016% 权重即可破解 Qwen 推理死循环(2026-11-03,2 条)
- 第 3 集:MIT 权重编辑讨论引热议,博主旧文演示手写权重跑通 Transformer(2026-11-03,2 条)
- 第 4 集:LLM 修复驾驶网络实验:权重清零后方案依然有效(2026-11-04,2 条)
- 第 5 集:MIT「权重空间编程」论文遭审计:结果成立但安全担忧真实(2026-11-04,2 条)
- 第 6 集:MIT 提出权重空间编程,微调 0.0002% 权重即大幅提升模型能力(2026-11-05,2 条)
- 改 0.0002% 权重无训练胜原模型,MIT 提出权重空间编程 — dbreunig · 2026-11-05
- MIT 展示 GPT-6 Astra 直改 Qwen 权重,数学成绩提升 6 倍 — lateinteraction · 2026-11-05