Dean Ball否认「蒸馏作用有限」论:推理trace正被大规模抽取
deanwball · x · 2026-10-18
Elie Bakouch 猜测经典的「在 OpenAI/Anthropic 输出上做 SFT」式蒸馏作用有限,因为拿不到 logits 和推理过程。Dean Ball 直接反驳:「我们绝对不知道这一点,推理 trace 正在被大规模抽取。」这条对话后来引出了关于加密 CoT 窃取与《Stolen Thoughts》论文的进一步讨论。
所属事件:Stolen Thoughts论文引发蒸馏与CoT窃取之争(9 条相关)→
「模型」频道最新
- 你已放弃等待修复的 AI 局限,实际怎么绕过去? — NormalWrangler937 · 2026-10-19
- Kording 吐槽:LLM 从「常出错」变成「常胡扯」了 — KordingLab · 2026-10-19
- Pi harness 跑分逼近 DeepSeek 官方:42.2 分成本仅一半 — PawelHuryn · 2026-10-19
- Krea2 去审查工具集体下架:仓库、账号、LoRA 一夜消失 — softlarch · 2026-10-19
- 用户怀念 Claude 5.5:新模型更强,但没了「人格」 — Dapper_Ambition5963 · 2026-10-19
- Anthropic 确认 dots 将登陆欧盟,已有 dots 可继续使用 — Dimillian · 2026-10-18