Burkov 质疑封闭模型加密推理链:防蒸馏是多余动作
burkov · x · 2026-11-07
机器学习知名作者 Andriy Burkov 观察到,封闭权重模型厂商正在「狂热地」加密推理链(reasoning traces)以防被蒸馏。他反驳称这一防御站不住脚:RLHF/RLVR 训练并不需要读取别人的推理链才能学会推理,加密推理 traces 对阻止蒸馏的作用被夸大了。
「模型」频道最新
- DeepMind 研究员解读新预训练:非算力加速,靠数据与算法改进 — tobyordoxford · 2026-11-07
- 13 个模型测「新娘美不美」善意谎言,12 个选择恭唯 Claude 独持异议 — zakkohane · 2026-11-07
- Gemini 4 Carbon 登顶 Artificial Analysis 榜首,仅限审核通过的网络安全防御者使用 — dl_weekly · 2026-11-07
- 激活定向实验:指定层和注意力头加 1.5,模型开始怀疑自己是人类 — Sauers_ · 2026-11-07
- Kelsey Piper:反对 AI 检测器 Pangram 最凶的,恰是用 AI 写作的「作家」 — TuhinChakr · 2026-11-07
- 开发者自建 autoresearch 编码基准:开源最佳但乏善可陈,muse open 被批远逊承诺 — JoshPurtell · 2026-11-07