想做 AI 搜索曝光却封禁爬虫:多家公司防火墙拦截 AI 抓取
gaganghotra_ · x · 2026-10-28
开发者 Gagan Ghotra 指出一个矛盾:许多企业一边希望获得 AI 搜索可见性,一边其防火墙却向 AI 公司的爬虫返回 404 或直接拦截抓取。他晒出的截图显示某站点用 Cloudflare 安全服务挡住了来自 AI 公司 bot 的请求。这意味着这些公司在 AI 搜索结果里可能根本没机会被引用——想被 AI 搜索收录,先得放行抓取。
「Fun」频道最新
- 海螺 AI 演示:把 Slipknot 名曲改写成 1971 年灵魂乐风格 — techhalla · 2026-10-28
- 机器搞定了有限单群分类的形式化,人类赢了定理本身 — burny_tech · 2026-10-28
- AI 生成红蓝撞色动态模糊人像，胶片颗粒感拉满 — azed_ai · 2026-10-28
- Nicolas Cage 称 Madden 原声难模仿,新片仍用其完整制作 — aakashgupta · 2026-10-28
- 公司倒闭后 Reddit 网友手握 200 万美元 OpenAI 额度求出路 — NWA55 · 2026-10-28
- 「我想念 o3」:一条推文戳中模型迭代的时代情绪 — voooooogel · 2026-10-28