SAE 特征标注能记住混淆手法,却记不住具体帖子文本?

voooooogel · x · 2026-09-05

voooooogel 与 @gleech、@repligate 讨论 SAE(稀疏自编码器)特征与模型记忆的关系:即使某条留言板内容的具体文本在消息板之间被改写过,模型仍可能记住一个(假设性的)被标注为“以多个 Z 开头的消息板留言作为混淆机制”的 SAE 特征,而不是任何一条具体帖子的原文。观点:可解释性特征捕获的是抽象模式而非逐字内容。

所属事件:SAE 特征与模型记忆机制引发技术争论(2 条相关)→

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →