修改 LLM 单一事实可能破坏相关逻辑推理能力
bravo_abad · x · 2026-08-15
一篇新的 Perspective 论文指出,编辑大模型知识比更新数据库条目困难得多。Ningyu Zhang 等人提出了“知识纠缠”概念:LLM 内部的事实并非独立存储,而是分布在相关概念和推理路径的网络中。
当前编辑方法存在严重缺陷。例如,当修改公司总部从旧金山搬到多伦多时,正确的变更应同步更新国家为加拿大,并保持逻辑一致性。然而现有方法往往破坏了这种关联,导致模型在其他相关问题上出现逻辑崩坏。
「研究」频道最新
- 传 Nick 可解释性研究重大突破,好到 Yudkowsky 也得下调 p(doom) — QuintinPope5 · 2026-10-16
- 又一美国大厂采用混合滑窗注意力,OLMo 架构引热议 — saurabh_shah2 · 2026-10-16
- JHU 教师 Laurent Younes 免费教材《机器学习导论》:覆盖优化到生成模型 — TheTuringPost · 2026-10-16
- RFdiffusion3 登上 Science,同步开源生物分子设计 agent 框架 Chaperone — anshulkundaje · 2026-10-16
- 微软论文:给路由器看会话历史,多轮 Agent 任务成功率多提 3.3 分 — dair_ai · 2026-10-16
- 研究者痛批烂评测泛滥:每个人都该亲手做一次好 eval — gabriberton · 2026-10-16