摘要：Cloudflare Radar 的 bot 与 AI Insights 数据提醒我们：在传统 HTML 网页请求里，机器正在成为更频繁的访问者。AI 智能体不是普通爬虫，它正在改变内容分发、网站安全、企业数字资产和互联网流量指标。
互联网正在发生一个非常微妙、但影响深远的变化：越来越多访问网页的，不再是人，而是代表人行动的机器。
Cloudflare Radar 最近在 Bot Traffic 和 AI Insights 页面中持续把自动化请求、AI bot/crawler、HTML page requests by client type 等维度单独展示。公开报道给出的一个最新口径是：在面向 HTML 网页内容的 HTTP 请求中，Bot 请求占比约 57.5%，人类请求占比约 42.5%。（Cloudflare Radar Bot Traffic、Cloudflare Radar AI Insights）
这个数字不能被简单理解为“人类已经不再是互联网主要用户”。如果按在线视频、社交媒体停留时长、App 使用时间、总带宽来算，人类仍然占据很大份额。Cloudflare 也提醒过，HTML 请求口径和 Radar 上按所有内容类型统计的 bot / human 份额并不完全相同；HTTP request 也不同于 bytes、停留时长或真实消费时间。（Cloudflare HTTP request traffic insights、Cloudflare Radar 2025 Year in Review）
真正变化的是：在传统网页世界里，机器正在成为更频繁的访问者。
这不是一个普通的爬虫增长故事。过去的机器人流量，大多是搜索引擎爬虫、价格监测脚本、垃圾注册程序、抢票脚本、撞库工具，逻辑相对固定，目标也比较清楚。现在的 AI 智能体不一样。它们不是简单抓取网页，而是替用户完成任务：比较价格、查找资料、预订行程、阅读文档、生成报告、调用工具、验证信息，甚至进入半自动交易流程。
一个人想买一台相机，可能打开五六个网站，看几篇评测，比较一下价格就下单了。一个 AI 智能体为了给出“最优建议”，可能访问几百个甚至几千个页面，把参数、评论、库存、价格、售后政策全部扫一遍。对用户来说，这只是一次提问；对网站来说，却可能是成百上千次请求。用户体验变轻了，网络负载却变重了。
这就是“智能体时代”的第一个悖论：AI 看起来让人少上网了，但它让互联网更忙了。
一、传统 Web 价值链正在被绕开
过去二十年，互联网商业模式默认了一件事：人会来到网站。媒体靠人点击文章赚钱，电商靠人浏览商品转化，SaaS 靠人进入页面注册试用，搜索引擎靠给网站带去流量换取索引权。整个 Web 的价值链，建立在“人类访问、页面展示、广告或交易转化”这个循环之上。
但 AI 智能体打破了这个循环。未来用户可能不再打开十个网页，而是问一个助手：“帮我找一家适合下周出差住的酒店”“帮我整理这个行业最近三个月的关键变化”“帮我比较三款工控机配置”。智能体进入网页，读取内容，返回结论。用户得到答案，却未必看到原网页；网站承担了请求，却未必获得一次真实访问；内容被消费了，但流量、广告、订阅和品牌曝光不一定回来。
这对内容行业是巨大冲击。过去网站关心 SEO，因为搜索引擎是流量入口；未来网站还要关心 AEO，也就是面向 AI Agent 的可读性、可信度和授权机制。谁的内容更结构化、更权威、更容易被机器理解，谁就更可能进入智能体的答案链。
但问题也随之而来：机器读了我的内容，应该付费吗？智能体代表用户访问，算不算正常访问？AI 公司训练和检索内容，边界在哪里？这些问题会重新定义内容资产的价格。
Cloudflare 在 2025 年回顾中也提到，AI bot 的大量 HTML 请求并不总能转化为用户回流；同时，crawl-to-refer ratio 这类指标被引入，就是为了衡量“爬取了多少页面”和“实际带回多少访问”之间的比例关系。（Cloudflare Radar 2025 Year in Review）
二、安全问题不再是“人还是机器人”
第二个影响发生在网络安全。传统安全系统习惯把访问者分为“人”和“机器人”。但智能体出现后，这个分类变得不够用了。
一个机器人可能是坏的，比如撞库、薅羊毛、爬取隐私数据；也可能是好的，比如帮用户比价、帮企业做采购、帮工程师查文档。一个真人浏览器也可能被恶意脚本操控，一个 AI 智能体也可能在用户授权下执行合法任务。未来真正重要的问题，不再是“你是不是机器人”，而是“你是谁授权的、你要做什么、你能做多大范围、你的行为是否可信”。
Cloudflare 在《Moving past bots vs. humans》中已经把这个判断说得很清楚：网站真正需要区分的不是抽象意义上的人类和机器人，而是访问意图、行为和风险；世界里既有想要的 bot，也有不想要的人类行为。（Cloudflare: Moving past bots vs. humans）
这意味着互联网需要新的身份层。今天我们识别人类，靠登录、验证码、Cookie、设备指纹；识别机器人，靠 User-Agent、IP、行为特征和风控模型。但 AI 智能体通常运行在真实浏览器里，行为越来越像人，甚至比人更有耐心、更规律、更会绕过传统规则。单纯靠验证码把机器挡在门外，会越来越困难，也会误伤正常用户。
更现实的方向，是让可信智能体带着可验证身份进入网站：它代表哪个用户、来自哪个平台、权限是什么、可以读取什么、能不能下单、是否允许二次使用内容，都需要被明确表达。Cloudflare 推 Web Bot Auth、signed agents 和 Radar Bots Directory，本质上就是在给“可信机器访问”补身份与可追责能力。（Cloudflare: The age of agents）
三、企业网站要从“给人看”变成“也给机器读”
第三个影响是企业网站和数字系统的设计方式。过去网页主要服务人，所以强调视觉、动线、转化率、停留时间。现在网页还要服务机器。
很多企业会发现，自己的内容对人看起来很漂亮，但对 AI 来说很混乱：信息藏在图片里，参数写在 PDF 深处，价格和条件不结构化，接口没有权限说明，知识库没有机器可读入口。结果就是，未来智能体在替用户做选择时，可能根本无法准确理解这家公司。
这会倒逼企业重做“机器可读的官网”和“智能体可访问的知识系统”。产品参数、服务范围、案例、价格、API、售后政策、合规声明，都需要从营销页面变成结构化资产。过去官网是给客户看的门面，未来官网还会变成给 AI 智能体读取的企业数字前台。谁先把内容、接口和权限标准化，谁就更容易被智能体推荐、调用和交易。
对工业企业尤其如此。今天很多制造企业还把数字化理解成建网站、做小程序、上云展厅。但在智能体时代，真正有价值的不是页面漂不漂亮，而是企业的产品能力、工艺能力、交付能力能否被机器准确理解和安全调用。
比如一家泵阀企业，如果它的型号参数、工况边界、选型规则、维修知识、报价逻辑都沉淀成结构化知识，未来采购智能体就可能直接完成初步选型。反过来，如果这些信息散落在销售手册、微信群、PDF 和老工程师经验里，智能体时代反而会让它更不可见。
四、旧流量指标会越来越失真
第四个影响是商业流量指标要重估。过去网站看 PV、UV、跳出率、停留时长、转化路径。AI 智能体访问时，这些指标可能全部失真。
一个智能体可能用一次请求读完用户真正需要的信息，也可能在几秒钟内抓取大量页面；它不一定点击按钮、不一定停留、不一定按人类路径浏览，但它可能代表一个高价值采购意图。企业如果还用旧指标判断价值，就会把重要流量当成异常，把潜在客户当成噪音。
所以，未来网站分析要多一层“智能体流量分析”：哪些请求来自搜索爬虫，哪些来自 AI 摘要，哪些来自用户授权代理，哪些来自恶意自动化；哪些只是消耗资源，哪些可能带来交易；哪些内容被频繁读取却没有回流，哪些机器访问最终转化成了询盘、下载、调用或订单。
流量运营会从“做人群画像”变成“做人和智能体的双重画像”。
五、互联网入口从页面转向任务
这件事也提醒我们，不要把 AI 智能体简单看成聊天机器人。它真正改变的是互联网操作入口。
浏览器时代，人点击链接；移动时代，人点 App；智能体时代，人提出目标，机器完成路径。入口从“页面”变成“任务”，从“搜索关键词”变成“意图委托”。这会改变搜索、电商、广告、内容、网络安全、云计算、企业软件和工业互联网的底层逻辑。
当然，智能体流量超过人类请求，并不意味着人类被替代。更准确地说，人类正在从“亲自访问网页的人”，变成“授权机器访问网页的人”。人仍然提出需求、判断结果、承担责任，只是中间大量机械浏览、筛选、复制、比较、汇总的动作被 AI 接管了。互联网不是没人用了，而是人的注意力越来越少直接落在网页上，更多通过智能体间接作用于网页。
这也是企业必须提前思考的问题：如果未来客户不是先来到你的网站，而是先问他的 AI 助手，你的企业还能被发现吗？如果采购不是先给销售打电话，而是让智能体自动筛选供应商，你的产品数据是否足够清晰？如果用户不再逐页阅读文章，而是让 AI 总结行业观点，你的内容能否被正确引用？如果机器访问成为常态，你的安全体系能否区分好机器和坏机器？
Cloudflare 这次数据的意义，不在于一个百分比本身，而在于它像一个分界线：互联网正在从“人类浏览器网络”走向“人机共同访问网络”。过去我们建设网站，是为了让人看；未来我们建设数字资产，是为了让人信、让机器读、让系统安全调用。
智能体流量超过人类流量，不是互联网的末日，而是新互联网秩序的开端。谁还只把 AI 当成内容生成工具，谁就会低估这场变化。真正的变化在后面：AI 不只是写文章、写代码、做客服，它正在成为新的访问者、新的中介、新的采购员、新的研究员，也将成为企业数字世界的新入口。
当机器开始替我们上网，互联网的规则就必须重新写一遍。