一个被视为网路分水岭的里程碑,比所有人预期的都更早到来了。根据 Cloudflare Radar 的最新数据,截至 2026 年 6 月,自动化的 Bot 请求已占全球 HTTP 流量的 57.4%,正式超越了人类使用者产生的流量。Cloudflare 执行长 Matthew Prince 原本预估这个拐点会在 2027 年底才会出现——结果提前了一年多。
这不只是一个统计数字上的翻转,它代表我们长期以来对「网页流量」的基本假设已经崩塌了。如果你的仪表板上显示的访问量有一半以上来自机器人,那么那些看起来漂亮的成长曲线,其实可能只是噪音。
HUMAN Security 在〈2026 AI 流量与网路威胁基准报告〉中分析了超过一千兆次的互动记录,揭示了一组令人难以置信的数据:
这意味著什么?简单来说,越来越多的 AI 系统不再只是「读取」网页,而是开始模拟人类的浏览行为——登入、点击、翻转页面、提交表单。它们不像传统爬虫那样容易被识别和封锁,因为它们的行为模式与真人高度重叠。
DataDome 的安全分析揭示了一个让内容出版商愤怒的现实:在 2026 年第二季度,Meta 的 AI 爬虫送出了高达 90 亿次请求,而这些请求带回来的人类访客数量几乎为零。
对比之下,ChatGPT 的爬虫活动虽然下降了,却能带来实质的转介流量——据 OpenAI 的数据,88% 的 AI 搜寻转介来自 ChatGPT。换句话说,ChatGPT 的爬虫是「有价值的消费者」,Meta AI 的爬虫则是纯消耗型的寄生者。
对中小型企业来说,这不只是公平性问题——每一次爬虫请求都在消耗你的频宽、伺服器资源、CDN 配额。当这些成本累积起来,很多企业的 CDN 帐单上会出现「不知去向」的支出黑洞。
面对这个变局,Cloudflare 在 7 月初正式推出了一项重大调整:Pay Per Crawl 升级为 Pay Per Use。更关键的是,从 2026 年 9 月 15 日起,新注册的网域将预设封锁「混合型」爬虫在显示广告的页面上。
Cloudflare 同时引入了三层管理架构:
Ceramic.ai 和 You.com 成为首批合作伙伴。Cloudflare 表示 Ceramic 将在搜寻结果中引用内容时向出版商付款,而 You.com 则允许 Agent 付费取得高品质内容。这是一个新兴市场的起点——谁能控制爬虫的入口,谁就能决定规则。
过去投资者靠「月活跃用户」、「流量增长率」和「转换率」来评估网路原生企业。但当超过半数的流量来自 Bot 时,这些指标开始失去意义:
有远见的投资人现在应该在尽职调查中加入新指标:Bot 流量的来源分布、用途分类和对营收的影响程度。不看这三项,就等于闭著眼睛看财务报表。
问题的核心在于:大多数中小企业没有专门的资安团队来分析流量组成、区分有价值的 Bot 和消耗资源的 Bot。他们面对的困境很残酷——
全开:白付 CDN 费用,伺服器被 AI Agent 当免费沙发躺平。全挡:搜寻能见度大幅下降,潜在客户无法在 AI 搜寻结果中找到你。
唯一合理的答案是智慧分级过滤——在 CDN 或 WAF 层即时识别 Bot 的用途和意图,然后动态调整放行策略。这正是 AIOps 自动运维的核心价值所在:用 AI 来防御 AI 带来的成本负担。
Bot 流量超越人类不是远景,而是已经发生的事实。Lafa System 的军级高防 WAF 体系能在 CDN 层即时分类和过滤无效 Bot 流量——阻挡消耗成本的 AI 训练爬虫,同时保留搜寻型爬虫维持能见度。让你的每一元 CDN 预算都花在真正的人类访客身上。