LatchBio 发布 OmicsBench v1:784 个任务横评 8 大组学基准
kenbwork · x · 2026-10-20
LatchBio 团队(kenbwork 等)推出 OmicsBench v1,一个面向生命科学的「元基准」(meta-benchmark),用于在高层面衡量模型的组学分析能力进展。
- 构成:从 8 个既有基准中汇集 784 个任务,全部围绕分子(omics)数据分析:SpatialBench、ScBench、EpiBench、VariantBench、BioSecBench-Surveillance、BioSecBench-Function、SpatialBench-Long、ScBench-Long
- 动机:团队此前已发布多个领域专用 agent 基准(涵盖生物信息、治疗能力、生物安全),认为数据类型已测得足够多,值得做一个高层「晴雨表」
- 配图给出了各前沿模型(Claude、GPT、Gemini、Grok、Kimi、DeepSeek 系列)在短时程/长时程任务上的通过率对比与随发布时间的进步曲线
- 团队成员 Chris 发布了配套长文,后续还有更多分析
所属事件:OmicsBench v1 发布：784 项组学任务横评前沿模型(2 条相关)→
「研究」频道最新
- 单个神经元定向激活让 Qwen3-8B 全程自称猫头鹰 — Sauers_ · 2026-10-20
- Q-CTRL:容错量子计算蓝图里超 99.5% 的量子比特处于闲置 — MJBiercuk · 2026-10-20
- 3 页纸证明无 Siegel 零点，数论难题现惊人简洁解法 — soumitrashukla9 · 2026-10-20
- 对数收益的正解:机会分布在多个数量级成本上,而非单纯有界 — DimitrisPapail · 2026-10-20
- 无需难度标注：Stackelberg 框架自动涌现随训练推进的课程 — shangbinfeng · 2026-10-20
- Stackelberg Alignment：把 LLM 分歧变成多模型协同训练信号 — shangbinfeng · 2026-10-20