谷歌官员警告AI加剧爬虫伪装乱象

谷歌搜索联络团队成员 Gary Illyes 在 Odys Podcast 访谈中谈到,恶意爬虫假冒 Googlebot 等身份的「爬虫伪装」问题正因 AI 而显著加剧。他指出,AI 训练对数据的巨大饥渴是背后的主要驱动因素,大量抓取行为让区分真假爬虫、维护网站生态变得更加困难,这一乱象引发业内对抓取秩序的关注。

2026-10-29 ~ 2026-10-30 · 2 条相关

• 谷歌 Gary Illyes 谈假 Googlebot 爬虫泛滥与 AI 训练抓取之乱 — gaganghotra_ · 2026-10-29
• Google Illyes:AI 让爬虫伪装问题更严重,训练数据饥渴是主因 — gaganghotra_ · 2026-10-30