Zeeg 分享 Agent 生成确定性爬虫架构:生成+校验+定期复验
zeeg · x · 2026-09-04
Sentry 工程师 zeeg 详述他让 Agent 驱动爬虫的核心循环:
- Agent 生成爬虫:利用一组 selector/类型化能力(typed capabilities)描述目标网站;
- 校验器验证:证明 Agent 生成的爬虫真的能跑通(输入与输出匹配);
- 定期复验:隔段时间让 Agent 重新检查网站内容是否变化、selector 是否出现假匹配。
他坦承最后一步是最薄弱环节,但认为这个「Agent 生成 + 确定性执行」的核心循环实现起来又简单又有效。这回应了 chanian 的质疑——对稳定可靠的静态抓取,让 Agent 实时驱动浏览器并无优势,正确方向恰恰是把 Agent 从运行时移到生成时。
所属事件:Sentry 创始人分享 Agent 生成爬虫的确定性架构(4 条相关)→
「编程与Agent」频道最新
- Luke Wroblewski 做折叠屏智能体管理 App:协调 agent 已成全天候工作 — LukeW · 2026-10-21
- Agentic SDLC:工程师从写代码者转型为智能体编排者 — Pavan_Belagatti · 2026-10-21
- OpenAI dots 接入 Merge for Workforce:员工权限即 agent 权限 — shensi · 2026-10-21
- 拆解 Agent 拓扑:模型、循环与工具各跑在哪,决定成本与安全 — davidcrawshaw · 2026-10-21
- Agent 全盘+辅助功能权限失控,企业急需任务级访问控制 — leveragedupside · 2026-10-21
- Acellera 用无监督 AI 科学家虚拟实验室跑真实分子发现项目 — gdefabritiis · 2026-10-21