不信厂商自测,开发者用 200 个真实 URL 横评 Firecrawl、Exa 与 Context.dev
oats_ja78 · reddit · 2026-10-30
一位开发者不满网上抓取工具对比多为厂商自己发布,决定亲自动手测试 Firecrawl、Exa 和 Context.dev 三个网页抓取/上下文工具。
- 测试集:约 200 个自己业务真实在用的 URL,含静态文档、React 应用、带地区同意墙的站点和若干死链
- 对照组:加上他已在用的 Playwright 自建方案,同一批 URL 同一天跑,设置尽量一致
- 关注点:页面是否真加载、返回的是正文还是 cookie 横幅、token 消耗多少,以及失败时工具是否如实报告而不是返回 200 假装成功
- 测试 harness 约 80 行代码,作者愿意分享,欢迎他人用自己的 URL 复跑对比
「编程与Agent」频道最新
- Skyworks 用 LangGraph 智能体把根因分析从 20 天压到 10 天 — LangChain · 2026-10-30
- 73项服务分拣:MCP工具哪些agent能自助开通,哪些必须人来点 — Total-Reasonable · 2026-10-30
- YC 押注 Turnstone:一套订阅跑全队 Agent,额度用完自动切换 — ycombinator · 2026-10-30
- RL 数据公司的秘密算法:用 Claude 合成测试并迭代改进 Agent — teodorio · 2026-10-30
- 7 个 AI 模型审同一代码库全员虚报完成率,作者复盘任务设计的 7 个错误 — rseroter · 2026-10-30
- Supabase 曾把每分钟数千新数据库误判为 DDoS,实为 Lovable 静默集成 — alifcoder · 2026-10-30