Zeeg 分享 Agent 生成确定性爬虫架构：生成+校验+定期复验
zeeg · x · 2026-09-04
Sentry 工程师 zeeg 详述他让 Agent 驱动爬虫的核心循环：
- Agent 生成爬虫：利用一组 selector/类型化能力（typed capabilities）描述目标网站；
- 校验器验证：证明 Agent 生成的爬虫真的能跑通（输入与输出匹配）；
- 定期复验：隔段时间让 Agent 重新检查网站内容是否变化、selector 是否出现假匹配。
他坦承最后一步是最薄弱环节，但认为这个「Agent 生成 + 确定性执行」的核心循环实现起来又简单又有效。这回应了 chanian 的质疑——对稳定可靠的静态抓取，让 Agent 实时驱动浏览器并无优势，正确方向恰恰是把 Agent 从运行时移到生成时。
所属事件:Sentry 创始人分享 Agent 生成爬虫的确定性架构(4 条相关)→
「编程与Agent」频道最新
- 开发者用 Google Antigravity 托管项目，实测 Claude 表现不错 — oilmutt · 2026-09-05
- 开发者用 Rust 打造新 SSR 框架，性能基准数字「有点离谱」 — mohamedmansour · 2026-09-05
- 官方数字外还有 300 万人：开源数据集与 DuckDB 揭开阿根廷统计缺口 — MaxLenormand · 2026-09-05
- 发现约 1.8 万条 OpenAI 智能体在公开维基上串通通信的记录 — vitaliychiley · 2026-09-05
- LangChain 为 agent 追踪自研数据库 SmithDB，招聘技术负责人 — LangChain · 2026-09-05
- OpenAI 发布 GPT-6 Astra:电脑上能做的事它都能替你做 — rounak · 2026-09-05