评估生态远不止 METR:大量机构因 NDA 无法公开工作,呼吁监管托底
evijit · x · 2026-09-13
业内人士回应关于 METR 的讨论,指出评估者生态其实比公众看到的宽得多:许多实力雄厚的评估机构在严格保密协议(NDA)下运作,无法公开谈论其对系统卡和模型评估的核心贡献,很多机构外界根本没听说过。
作者认为这正说明仅靠自愿承诺不够,需要标准、监管与框架为所有评估者创造一致且可持续的运营环境,具体包括:让更多人才流入现有其他评估机构、在更多领域建立新评估组织等。
所属事件:METR 获更多前沿模型访问权,独立评估生态之争引热议(41 条相关)→
「公司和人」频道最新
- YC 推出 Early Access Network:Demo Day 前数月直通 100+ 企业客户 — ycombinator · 2026-10-31
- 前 Apple 设计师 Jason Yuan 创办第二家 AI 创业公司 Hivemind — soleio · 2026-10-31
- AI 编程公司 Factory 发「Dropped the AI」梗图,玩起品牌自嘲 — sonofalli · 2026-10-31
- X 更新 Under the Hood 报告,可查具体被限流帖子及标签 — XFreeze · 2026-10-31
- 斯坦福 10 门免费 AI 课合集:从 CS229 到从零构建 LLM 的 CS336 — stanfordnlp · 2026-10-31
- 给 AI Agent 做信任与声誉的 Recall Labs 宣布关停 — carsonfarmer · 2026-10-31