Epiq 推出 CorporateBench:考验模型从海量碎片记录重建企业知识
sophiamyang · x · 2026-10-30
- Epiq AI Labs 加入 Fireworks AI 的 Specialized Intelligence Index(SII),贡献面向法律等知识密集型工作的评测数据集 CorporateBench。
- 该基准构建了 4 家合成公司的知识库,文档规模从 353 条到超过 23 万条,考察模型能否从碎片化非结构化信息中恢复事实、跨文档连接证据,并追踪随时间演变的关系(基于时序知识库,有可验证的 ground truth)。
- 核心主张:企业 AI 的真正考验不是回答孤立问题,而是大规模地构建、连接与推理组织知识,推动评测超越单纯检索问答。
「研究」频道最新
- Signal65 新基准:一模型样本正确率 97%,完整任务却全军覆没 — ryanshrout · 2026-10-30
- TEM 问世:能量模型首次可扩展,声称多项能力超越扩散模型 — du_yilun · 2026-10-30
- VisualForce:从软夹爪形变推断力度,机器人无需力传感器也能捏莓果 — du_yilun · 2026-10-30
- CMU 团队 HALO 论文:人形机器人学会与不可预测的人类协作 — Scobleizer · 2026-10-30
- Apple 实习成果:视觉定位任务暴露视觉语言模型安全漏洞 — Cohere_Labs · 2026-10-30
- FreeView:无需干净参考图,自动过滤干扰视图做稳健 3D 重建 — zhenjun_zhao · 2026-10-30