研究员 Burkov 炮轰 Bright Data：付费代理服务按 robots.txt 拒请求还看客户下菜
burkov · x · 2026-09-30
机器学习研究者 Andriy Burkov 发帖吐槽 Bright Data 代理服务：其昂贵的 Browser API 大部分时间可被检测到，而且会对网站 robots.txt 中标记 Disallow 的页面直接拒绝请求——但某些特定客户可获得豁免，被拒后会引导你去联系销售代表解除限制。他质疑这种“看客户下菜”的做法，并公开求推荐不玩虚的、真能稳定访问被限流/封 IP 网页的代理服务。
「公司和人」频道最新
- 被问个人 agent 计划,Notion 高管半玩笑回应 roadmap — nbaschez · 2026-09-30
- 经济学家 Kevin Bryan 开放「进步」课程全套资料,附 AI 助教与讲义笔记 — Afinetheorem · 2026-09-30
- AI 圈观察：每家大厂里似乎都有个阿根廷人，绝非巧合 — evilrabbit_ · 2026-09-30
- 「都在做顺理成章的续作」：业内人士批 AI 产品发布缺乏用户思考 — vaibhavbetter · 2026-09-30
- OpenAI DevDay 2025 中英双语完整版视频上线 — xiaohu · 2026-09-30
- repligate 声称常去 Lighthaven，从未感到氛围不适或有性别问题 — repligate · 2026-09-30