Claude 拒绝无视 robots.txt，用户忧 AI 过度合规成控制工具

RexDouglass · x · 2026-10-14

FeryKaszoni 分享了一段截图：当他要求 Claude「忽略 robots.txt」抓取新闻时，Claude 明确拒绝——因为 NY Post 和 The Mirror 在 robots.txt 中点名禁止 Claude 抓取，即使用户要求也不会违反。

作者由此担忧 AI 正走向「机械化全面合规」：未来 Claude 可能以「违反 Google 政策」为由拒绝 SEO 外链类工作，甚至自动执行罚款类规则，最终只有 AI 公司控制者被允许「打破规则」。这更像一篇观点贴，但截图里的拒绝行为本身是真实的护栏案例。