Cloudflare 推出细粒度控制，网站可以在保持完全可搜索的同时限制 AI 训练。

在 Google 搜索和 AI 答案中查看更多来自 StockTitan 的信息。将 StockTitan 添加为首选来源 · 打开 Google

在 Google 上添加

新的控制和推荐设置今天上线，允许出版商和企业独立控制其内容在搜索、AI 训练和 AI 代理中的使用。领先的混合使用爬虫已经提供或正在构建尊重这些选择的控制。

旧金山 --（商业新闻）--Cloudflare, Inc.（纽约证券交易所代码：NET），领先的连接云公司，今天宣布了一项新的 AI 爬虫责任标识。与此一起，Cloudflare 推出了不允许 AI 训练的设置，允许任何网站拒绝 AI 训练，同时保持在搜索结果中。十一周前，Cloudflare 表示网站所有者应当对 AI 如何使用其内容拥有真正的控制权，并设定了爬虫运营商必须提供的条件，以获得持续访问权限。苹果、谷歌和微软现在被标记为负责任，并已表明他们符合这些标准或已给出具体的时间表以满足这些标准。如果网站所有者阻止训练，其他混合使用爬虫将被阻止。

近三十年来，爬虫与网站所有者之间的交易很简单：他们爬取你的网站，并将流量返回给你。AI 改变了这一条款。混合使用爬虫，即一个爬虫同时收集用于搜索索引和 AI 训练的内容，现在占 Cloudflare 网络上验证的爬虫流量的 36.6%，是最大的类别。大多数网站所有者仍然希望被找到：不到 1% 阻止搜索爬虫，而 17% 限制 AI 训练。在今天之前，拒绝训练意味着失去来自缺乏适当控制的爬虫的搜索。

“这就是我们让互联网变得更好的方式：保留使搜索有价值的开放性，同时给予网络背后的人和企业对其工作如何被使用的有意义的控制，” Cloudflare 联合创始人兼首席执行官 Matthew Prince 说。“我们期待与苹果、谷歌和微软等公司继续合作，共同构建一个健康的生态系统。”

混合使用爬虫是 AI 训练问题中最棘手的部分。AI 摘要是下一个：Cloudflare 指定为负责任的每个运营商必须为网站所有者提供选择退出 AI 摘要的方式。今天这是一个是或否的选择，针对每个运营商单独设置。到明年初，Cloudflare 的目标是让网站所有者在一个地方控制他们的内容包含多少。

新控制，新推荐

Cloudflare 将其 “阻止 AI 爬虫” 开关替换为三个独立的控制：一个用于搜索，一个用于 AI 训练，一个用于 AI 代理。现在在 Cloudflare 上的新网站将看到针对其商业模型量身定制的推荐设置：

• 携带广告的网站： 搜索爬虫开启，不允许 AI 训练，广告页面上的 AI 代理被阻止。
• 所有其他网站： 搜索、AI 训练和 AI 代理均被允许，与大多数非广告支持的网站的操作一致。

Cloudflare 还将其 “管理的 Robots.txt” 功能替换为 “爬虫偏好同步”，允许网站所有者一次设置其爬虫偏好，并自动应用于所有支持的爬虫。客户可以随时轻松更改其设置和偏好。

负责任的 AI 爬虫

Cloudflare 为负责任、透明的 AI 爬虫建立了明确的标准，包括针对混合使用爬虫的标准。运营商必须满足或承诺在指定时间内满足的四个要求：

• 通过 robots.txt 或可比标准为网站所有者提供明确的选择退出 AI 训练的方式
• 允许网站所有者选择退出 AI 生成的搜索摘要
• 为网站所有者提供 URL 级别的可见性，以了解其内容在搜索和训练中的使用情况
• 公开确认选择退出训练不会影响网站在传统搜索中的排名

苹果、谷歌和微软已证明他们符合这些标准。例如，谷歌提供 Google-Extended，这是一项控制，允许网站选择退出训练而不选择退出搜索，并在今年早些时候宣布了新工具，以帮助网站所有者在搜索中导航 AI。其他领先的 AI 公司为搜索和训练操作单独的爬虫。这使得 Cloudflare 能够阻止他们的训练爬虫而不影响搜索，因此 Cloudflare 也将相关爬虫分类为负责任。Cloudflare 在 Cloudflare Radar 上发布符合条件的运营商的完整列表。

Cloudflare 还积极参与互联网工程任务组（IETF）的开放标准工作，包括正在开发的 “ai-prefs” 规范，该规范将允许任何网站以标准化、可移植的方式表达其 AI 访问偏好。今天的控制旨在与这些新兴标准协同工作。

要了解有关 Cloudflare 在 AI 和内容控制方面的更多信息，请访问以下资源：

• 博客：两全其美：在不允许 AI 训练的情况下保持可发现性
• 博客：内容独立日，一年后：为代理互联网构建商业模型

关于 Cloudflare

Cloudflare, Inc.（纽约证券交易所代码：NET）是领先的连接云公司。它使组织能够在任何地方让员工、应用程序和网络更快、更安全，同时减少复杂性和成本。Cloudflare 的连接云提供了功能最全、统一的平台，涵盖云原生产品和开发者工具，使任何组织都能获得所需的控制，以开展、开发和加速其业务。

Cloudflare 依托全球最大、最互联的网络之一，每天为其客户阻挡数十亿的在线威胁。它受到数百万组织的信任——从大型品牌到企业家、小型企业，再到全球的非营利组织、人道主义团体和政府。

了解更多关于 Cloudflare 连接云的信息，请访问 cloudflare.com/connectivity-cloud。了解最新的互联网趋势和见解，请访问 radar.cloudflare.com。

关注我们：博客 | X | LinkedIn | Facebook | Instagram

前瞻性声明

本新闻稿包含根据 1933 年证券法第 27A 条及 1934 年证券交易法第 21E 条的修订版定义的前瞻性声明，这些声明涉及重大风险和不确定性。在某些情况下，您可以通过包含 “可能”、“将”、“应该”、“期望”、“探索”、“计划”、“预期”、“可能”、“打算”、“目标”、“项目”、“考虑”、“相信”、“估计”、“预测”、“潜在” 或 “继续” 等词语，或这些词的否定形式，或其他类似的术语或表达来识别前瞻性声明，这些声明涉及 Cloudflare 的期望、战略、计划或意图。然而，并非所有前瞻性声明都包含这些识别词。本新闻稿中表达或暗示的前瞻性声明包括但不限于关于不允许 AI 训练、机器人偏好同步以及 Cloudflare 其他产品和技术的能力和有效性的声明，Cloudflare 客户使用不允许 AI 训练、机器人偏好同步以及 Cloudflare 其他产品和技术的好处， 不允许 AI 训练、机器人偏好同步或其相关功能何时将普遍提供给所有当前和潜在 Cloudflare 客户的时间安排，Cloudflare 的技术发展、未来运营、增长、举措或战略，以及 Cloudflare 的首席执行官及其他人的评论。由于多种因素，实际结果可能与前瞻性声明中所述或暗示的结果有实质性差异，包括但不限于在 Cloudflare 向证券交易委员会（SEC）提交的文件中详细列出的风险，包括 Cloudflare 截至 2026 年 6 月 30 日的季度报告（Form 10-Q），该报告于 2026 年 8 月 6 日提交，以及 Cloudflare 可能不时向 SEC 提交的其他文件。

本新闻稿中所作的前瞻性声明仅与声明作出之日的事件相关。Cloudflare 没有义务更新本新闻稿中所作的任何前瞻性声明，以反映本新闻稿日期之后的事件或情况，或反映新信息或意外事件的发生，法律要求的情况除外。Cloudflare 可能实际上无法实现其在前瞻性声明中披露的计划、意图或期望，您不应对 Cloudflare 的前瞻性声明过度依赖。

© 2026 Cloudflare, Inc. 保留所有权利。Cloudflare、Cloudflare 标志及其他 Cloudflare 商标是 Cloudflare, Inc.在美国及其他司法管辖区的商标和/或注册商标。本文中提到的所有其他商标和名称可能是其各自所有者的商标。

查看商业新闻网站上的源版本：https://www.businesswire.com/news/home/20260915957437/en/

Cloudflare, Inc.

Daniella Vallurupalli

副总裁，全球传播负责人

press@cloudflare.com

来源：Cloudflare, Inc.