Patreon 开始主动封堵 AI 爬虫
TechCrunch AI · rss · 2026-07-17
Patreon 不再只是靠 `robots.txt` 这类声明来约束爬虫，而是开始和 Cloudflare 合作，直接阻止会抓取创作者内容、用于训练 AI 模型的机器人。 这意味着平台对“未经许可抓取内容”的态度进一步升级：从告知和限制，转向主动拦截。文章强调，这反映出网站正在从被动遵守爬虫规则，走向更强硬的技术防御。
TechCrunch AI · rss · 2026-07-17
Patreon 不再只是靠 `robots.txt` 这类声明来约束爬虫，而是开始和 Cloudflare 合作，直接阻止会抓取创作者内容、用于训练 AI 模型的机器人。 这意味着平台对“未经许可抓取内容”的态度进一步升级：从告知和限制，转向主动拦截。文章强调，这反映出网站正在从被动遵守爬虫规则，走向更强硬的技术防御。