研究者质疑 AlphaGenome 蒸馏:模型间相关性几乎相同
jeffvierstra · x · 2026-09-19
研究者 jeffvierstra 质疑 Google AlphaGenome 模型的蒸馏发布:他认为单纯报告 90 亿个预测并不是目标,「Google 有无限 GPU/TPU 不代表这些预测平均有多大价值」。
他进一步指出,仔细检查各模型的变异位点相关系数(带符号 Pearson r)后,发现所有模型的结果基本相同——蒸馏只是调整了其他模型输出的噪声。由于 AlphaGenome 不公开蒸馏前的模型,他无法进一步验证。
所属事件:实测质疑 AlphaGenome 蒸馏版:仅居中游(3 条相关)→
「研究」频道最新
- 387篇论文凝练一个判据:AI for Science 该换模型还是换测量 — bravo_abad · 2026-11-04
- Noetra 员工分享首秀:为多模态 LLM 从零造图像编码器 — HirokatuKataoka · 2026-11-04
- 日本团队全自研图像编码器,媲美 SigLIP2 并支持中日英 — HirokatuKataoka · 2026-11-04
- LLM-as-judge 该怎么报置信度?开发者拒绝 0-100 分的三条理由 — jokiruiz · 2026-11-04
- 清华 BEMULA 基准:AI 智能体记忆遗忘端到端通过率不足 1.5% — rohanpaul_ai · 2026-11-04
- KAIST 提出 FactEmbed:分解式潜在向量改进组合图像检索 — kaist-ai · 2026-11-04