研究称 LLM 权重编辑只能修缺陷,难提升模型推理上限

研究者 1a3orn 通过在小型玩具领域对小型 LLM 进行实验,分享了对「权重空间编程」与可解释性的观察:当 LLM 推理存在明显缺陷时,借助权重编辑可以帮助修正这些缺陷,相当于修复 bug;但即便针对非常小的模型和极小的任务域,LLM 也无法真正提升模型的推理上限。这一结果对寄望于通过权重编辑增强模型能力的研究方向泼了冷水。

2026-11-03 ~ 2026-11-03 · 2 条相关