OpenAI、谷歌、微软、Anthropic 共同采用反爬取退出新标准
The Verge AI · rss · 2026-10-31
OpenAI、Google、Microsoft 和 Anthropic 宣布将采用一项新标准,让出版商可以对 AI 爬取说「不」。通过所谓的「policy token」共享信号,网站可在 robots.txt 中一次性声明对多家 AI 公司的训练偏好,无需逐家设置。\n\n该提案由 Anthropic 标准技术负责人 Kevin Kelley 在 IETF(互联网工程任务组)框架下提出,将嵌入网站长期用于控制爬虫的 robots.txt 文件中。
「安全」频道最新
- Claude Duet 停止规则解读:审批疲劳是自主 Agent 真正难点 — shoumikgoswami · 2026-10-31
- OpenAI 详解 MCP 工具标注审核规则:标注再准确也不等于安全 — shoumikgoswami · 2026-10-31
- 884 次采样重建 Muse 隐藏宪章,Meta 开源模型暗藏行为准则 — sethlazar · 2026-10-31
- UC San Diego 斥资 125 万美元新设「原则性智能体 AI」跨学科中心 — sethlazar · 2026-10-31
- 「不能用 AI 速通安全」引争论:安全是人、流程与代码的结合 — dbasch · 2026-10-31
- Scribd 通报数据泄露:邮箱与信用卡尾号等信息或已泄露 — x______________ · 2026-10-31