Firecrawl 发布法律检索基准:581 条查询,自家索引 76.2% 登顶

devdigest · x · 2026-11-05

Firecrawl 发布 Legal Retrieval Benchmark,测试各搜索 API 找到官方法律文件(法规、法案、法院意见、机构指引)的能力:

数据集为 581 条检索请求,每条对应一个官方来源,按 gold@1(正确文件排第一)、gold@10、bad@10(矛盾页面进入前十)三个指标排名,附 95% 置信区间
Firecrawl Government & Legal Index 以 76.2% 的 gold@1 排名第一,领先第二名 Claude Code + 自带 web search(71.4%)4.8 个百分点;gold@10 达 96.6%,领先 Parallel 6.1 个百分点
Exa 59.6%、Parallel 54.2%、无工具的 Claude Code 仅 47.8%;bad@10 上 Firecrawl、Exa、Parallel 分别为 9.6%、9.6%、9.3%,统计上打平
同时宣布了 7500 万美元 B 轮融资(Alexandria 产品)

注:这是厂商自建并自夺冠的基准,结果仅供参考。

「创投」频道最新