开发者推出托管式抓取 MCP:被网站拦截不收费,免费送 1000 积分
SidMishraDev · reddit · 2026-10-13
一位印度独立开发者发布了 MeshArc,一个面向 AI agent 的托管式网页抓取 MCP 服务器,解决的核心痛点是:Claude 的 fetch 常被 403 或 Cloudflare 拦截,而多数抓取 API 对失败请求照样收费。
工作方式:先尝试普通 fetch,只有当网站反爬时才升级到 session 或真实 Chrome;如果仍拿不到页面,用户不付费。还支持从 sitemap 全站爬取,并对比上次运行告诉你哪些页面变了——作者主要用它监控竞品的定价页和文档页。
使用很简单:把 https://mcp.mesharc.dev/mcp 添加为 connector 并登录即可,兼容 Claude、Claude Code 和 Cursor。免费层 1000 积分。作者正在征集大家拿「最难啃的网站」来测试。
「编程与Agent」频道最新
- Theo 实测三模型修 bug:Opus 直达根因,GPT 写 300 行测试 — shadcn · 2026-10-13
- 一张图讲透 AI Harness:从 Agent Loop 到 Guardrails 的 6 个关键概念 — femke_plantinga · 2026-10-13
- 把规格写成状态机:用 reducer 图谱逐步审问 AI 编码智能体 — DavidKPiano · 2026-10-13
- Unit42 披露 LLM 驱动恶意软件 C2Agent,借受害者 AI 工具发起攻击 — cyb3rops · 2026-10-13
- Aiden Bai:现代编程的本质是写好 eval 与验证器 — aidenybai · 2026-10-13
- Vibe42 更新侧边栏:实时展示各 Agent 工作状态并按 workspace 分组 — yihui_indie · 2026-10-13