研究者质疑抗体模型用 SabDab 训练至 2025,测试集污染存疑
anshulkundaje · x · 2026-09-19
在讨论某抗体结构预测模型时,研究者 proteinrosh 指出其疑似使用截至 2025 年的 SabDab 结构数据训练,虽然作者称移除了与测试集相似的条目,但这种做法与该领域惯例差异很大,引发对评测严谨性的质疑。
「研究」频道最新
- 思维链监控不是审计日志：模型解释与其真实决策脱节 — ziv_ravid · 2026-09-19
- 多篇论文质疑思维链忠实性:填充词可涨 13 分,解释常是表演 — ziv_ravid · 2026-09-19
- TokenRhythm 发布 NeoHorse-1:4B/9B,宣称首个 RSI 闭环验证 — jiqizhixin · 2026-09-19
- 用强化学习训练语言模型写代码作画，代码可编辑替代反复调提示词 — measure_plan · 2026-09-19
- Bountied 验证子网十天攻破六道悬置数十年的 Erdős 公开难题 — markjeffrey · 2026-09-19
- 斯坦福学者：基因表达预测模型受限于数据而非规模 — anshulkundaje · 2026-09-19