开源爬虫框架 Scrapling 获 96.8k Star,整合请求、解析与 MCP 接入
abhishek__AI · x · 2026-11-05
开源 Python 框架 Scrapling 把 HTTP 请求、浏览器自动化、解析与大规模爬取整合到一处，号称取代拼凑多个爬虫库的做法，GitHub 已收获约 96.8k Star。
主要特性：
- 绕过 Cloudflare 等反爬防护
- 自动代理轮换
- 智能元素追踪（页面结构变化后仍能定位元素）
- 通过 MCP 与 AI agent 集成，方便智能体调用爬取能力
项目采用 BSD-3-Clause 许可证完全开源，文档见 scrapling.readthedocs.io。
所属事件:开源爬虫框架 Scrapling 破 96k Star,支持 MCP 接入(3 条相关)→
「编程与Agent」频道最新
- Omarchy 4.5 发布:740 个 PR,支持 Mac 原生安装与传统桌面模式 — john_lam · 2026-11-05
- A2A 协议实战:5 种方式让不同框架的 AI Agent 协同工作 — goyalshaliniuk · 2026-11-05
- 让模型给自己挑刺：向 AI 询问 harness 缺陷可揪出隐蔽 bug — insomniating · 2026-11-05
- 开发者称 6 个月未 push 百万行 AI 代码:反正都不值钱 — ryunuck · 2026-11-05
- 独立开发者用 Claude Opus 5.5 做出浏览器战机模拟器，2 周吸引 2.5 万玩家 — aCakeShip · 2026-11-05
- 42 位物理学家出题：FrontierPhysics 基准端到端评测 AI 科研智能体 — Bingran You · 2026-11-05