Cloudflare宣布9月15日起默认拦截混用型AI爬虫抓取带广告页面
全球最大的互联网基础设施提供商之一Cloudflare宣布，自2026年9月15日起，将默认拦截混用型AI爬虫在带广告的页面上抓取内容。这类爬虫同时兼具AI训练和网络搜索功能。
Cloudflare表示，页面上的广告说明网站主希望真人看到该页面，因此页面上的“注意力”应优先留给人类用户。如果同一爬虫身兼训练和搜索功能，网站主在拦截其训练行为时，也可能连带拦截该爬虫的搜索功能。
据Cloudflare估计，2025年7月，全球约30%的网络流量由机器人产生，而目前这一比例已上升至60%。此前，Cloudflare曾推出“按次付费爬取”模式，允许网站出版商向AI爬虫收取内容抓取费用。
- 2026-09-09 09:42 | 爱范儿：GPT-6 让 48 个网页验证码失效了，最聪明的 AI 和最笨的人类相遇了阅读原文
机器人也把「我不是机器人」勾上了。 GPT-6 成功通过了「我不是机器人」游戏中的所有 48 个关卡。 「我不是机器人」是独立开发者 Neal Agarwal 在 neal.fun 上做的网页游戏，随着关卡推进，任务会变得越来越离谱、越来越不像「验证」，比如在涂鸦墙里找到威利、在配音板上玩「西蒙说」、画一个完美的圆，甚至在关卡里让你和「女友」分手、停车入位。 你可能会咬牙切齿做完，可 GPT-6 只是挥挥手表示：不吃压力。 验证码（CAPTCHA），全称是「全自动区分计算机和人类的公开图灵测试」。 由于它是用计算机来考人类，而不是标准图灵测试中那样由人类来考计算机，所以也被视为一种反向图...
- 2026-09-08 17:11 | 36氪：GPT-6 击穿 48 道地狱级验证码，最聪明的 AI，遇上最笨的人类阅读原文
机器人也把「我不是机器人」勾上了。 GPT-6 成功通过了「我不是机器人」游戏中的所有 48 个关卡。 「我不是机器人」是独立开发者 Neal Agarwal 在 neal.fun 上做的网页游戏，随着关卡推进，任务会变得越来越离谱、越来越不像「验证」，比如在涂鸦墙里找到威利、在配音板上玩「西蒙说」、画一个完美的圆，甚至在关卡里让你和「女友」分手、停车入位。 你可能会咬牙切齿做完，可 GPT-6 只是挥挥手表示：不吃压力。 人类的验证码已经拦不住 AI 验证码（CAPTCHA），全称是「全自动区分计算机和人类的公开图灵测试」。由于它是用计算机来考人类，而不是标准图灵测...