号称匹敌 GPT-6.1 的 DNA 模型遭实测打脸：10 例 8 例不如随机
anshulkundaje · x · 2026-10-23
Hugging Face 团队 Loubna Ben Allal 发布 14B 开源 DNA 模型 Carbon-X，宣称在 DNA+文本上中训练后超越所有开源语言模型、以 1/1000 成本匹敌 GPT-6.1 Sol，可回答序列问题、解释突变、生成新 DNA。但斯坦福教授 Anshul Kundaje 随即做了临床级实测：从 RareBench 组装 10 条含致病变异的 1k-token DNA 片段、80 条相似非致病变异、10 条参考基因组序列，用直接提示致病性、提示解释表型、计算突变 log likelihood 等多种方式测试。结果显示 10 例中 8 例模型判定致病变异的概率低于随机水平（平均 P(causal) 0.13，恰等于随机基线），仅 1 例自信正确；而前沿 LLM 能全部答对。Kundaje 表示「 jointly embedding 文本与 DNA 的想法很好，但首次尝试低于预期」，并向 Ben Allal 抛出合作邀请。配图清晰展示各病例上加因果变异概率几乎贴地。
所属事件:Hugging Face 开源 DNA 模型 Carbon-X，遭斯坦福学者质疑(24 条相关)→
「模型」频道最新
- 用户算账：每日额度仅约 7 亿 token，下午就得手动重置，28 天活动被指是续命手段 — yangyi · 2026-10-23
- 爆料称 Anthropic 正训练对标 OpenAI 内部模型的新模型 — imjustnewatai · 2026-10-23
- AI 研究者：Claude 替我完成了多年前放弃的繁琐研究任务 — MikePFrank · 2026-10-23
- Dream Labs 出 stealth:双手机器人基座模型 Dream-1,时租仅 3 美元 — scott_e_reed · 2026-10-23
- Claude 模型登陆 Google Cloud:Anthropic 托管版正式可用 — claudeai · 2026-10-23
- Beam 对战 GLM 5.3 去审查版：10 轮攻防修补 96% 漏洞 — bigblueboo · 2026-10-23