Agent 抓网页用什么：Exa、Tavily、Firecrawl 生产实战讨论
Ok-Construction-7407 · reddit · 2026-10-27
一条 Reddit 讨论帖问大家生产环境的 agent 到底用什么做网页数据源：Exa、Tavily、Firecrawl、Serper、context dev 还是自建爬虫，以及是否满意、有没有中途换过方案。
更有价值的部分是大家被迫「打补丁」的经验：重试与退避、结果过滤、输出校验、缓存等围绕搜索/抓取 API 必须自建的周边工程。对做 agent 工程的人是不错的选型参考。
「编程与Agent」频道最新
- shadcn：语音转文字应用=T3 代码+一个 prompt，自带模型跑通全流程 — shadcn · 2026-10-27
- 写代码变便宜了，但被省掉的摩擦原本在做有用的认知工作 — charles_irl · 2026-10-27
- 一人+AI 挑战全套 Adobe:Rust 开源套件 Crafting Apps 浮出水面 — ankur_maker · 2026-10-27
- Anthropic 官方指南：企业 Agent 该把子代理折回主循环 — addyosmani · 2026-10-27
- Claude Code 空闲自动压缩惹恼用户，两条命令即可关闭 — JasonBotterill · 2026-10-27
- 博主用 Claude Code 自制新闻联播风片头，卡在配音环节 — xiaohu · 2026-10-27