Claude Code 经 MCP 接 Oxylabs,抓取反爬网站结构化数据
mhdfaran · x · 2026-10-29
- Claude Code 通过 MCP 调用 Oxylabs Web API，可从原本无法直接打开的 JS 重度渲染和有反爬防护的网站抓取干净数据，返回结构化 JSON 或 Markdown。
- 作者演示：要求「列出德国的 iPhone 18 Pro 零售商」，Claude Code 自动抓取相关商店与运营商页面并附上商品链接。
- 还能把 Apple 官网页面自动整理成一张干净的价格对比表。
- 原帖附带了完整工作流与 prompt（"full workflow with prompts below"），属于可直接照做的 agent 数据抓取组合技。
「编程与Agent」频道最新
- PcGöz：让 Claude 用文本「看见」Windows 桌面，token 消耗降约 30 倍 — emperorbug46 · 2026-10-29
- Transformers.js + WebGPU:全离线浏览器端 AI 实战演讲将登 Code Talks — nicodotdev · 2026-10-29
- 开发者让 agent 通宵管理 Codex Cloud 任务，睡前交接照常推进 — gabrielchua · 2026-10-29
- 财富100强几乎没用 coding agent,业内人:工程师早偷偷用上了 — chrisalbon · 2026-10-29
- Vercel 开源编码智能体 fx 成 T3 Code 内置 Provider — moeinteractive · 2026-10-29
- 给 AI agent 一年跑 GTM：三家模型营收 1500 万到 1800 万美元 — ycombinator · 2026-10-29