Yoav Goldberg 评权重解读实验:读懂参数比从零手写更惊艳

AI 学者 Yoav Goldberg 近期点评一批直接操作神经网络权重的实验,认为最令人印象深刻的是「仅凭权重就能理解网络在做什么」的研究,甚至仅编辑偏置即可修复模型,这比从零手写权重完成任务更惊人。他表示从零写权重对他而言并不新奇,自己早有让学生在考试中做类似练习。在他看来,权重并非无意义的数字串,读懂之后的权重编辑只是判断哪些数字该改的机械作业,并无神秘之处。

2026-11-03 ~ 2026-11-03 · 3 条相关