BioBench 入驻 Fireworks 智能指数:1337 项任务测生物体安全
kenbwork · x · 2026-10-29
Benchmarks.Bio 团队宣布与 Fireworks AI 合作,将 BioBench 纳入后者的 Specialized Intelligence Index(SII)。要点:
- 规模:BioBench 号称最大的生物领域智能体能力与安全护栏基准,含 1337 项任务,模拟真实科研工作流,单任务可达 50+ 轮交互、运行最长 10 小时。
- 覆盖领域:组学(单细胞与空间转录组学、表观遗传学、变异分析、宏基因组、生物安全监测)、治疗学(临床前药理、ASO/siRNA/抗体发现)、临床应用(基于私有实验数据与患者队列的肿瘤学任务)。
- 拒绝能力:还包含对模型/safeguard 拒答行为的评分,兼顾能力与生物安全双重评估。
这为衡量前沿模型在生物体任务上的能力与风险提供了标准化坐标系。
「安全」频道最新
- AI 安全圈争论：Anthropic「勒索演示」是否伤害信息公共品 — jessi_cata · 2026-10-29
- 电台节目探讨 AI 虚拟代言人广告的监管责任归属问题 — aziz4ai · 2026-10-29
- 法国政要力挺 Mistral 引发争论:国家不该押注单一 AI 冠军 — AymericRoucher · 2026-10-29
- 英国拟再投 1.2 亿英镑测试前沿 AI 模型，预算为美国同行 10 倍以上 — Miles_Brundage · 2026-10-29
- a16z 调查 100 位 CISO：AI 安全全面重写 2027 优先级清单 — a16z · 2026-10-29
- 海关口径算中美算力差距：走私 GPU 已达 66 万张 H100 当量 — pstAsiatech · 2026-10-29