Cloudflare 推出 Verified 机器人持续问责评估机制

用途与变化

Cloudflare 在 2026 年 10 月 16 日的博客中介绍了一套针对 Verified 机器人（已验证机器人）的持续问责评估系统。其核心观点是：身份验证只解决“你是谁”，而“能否信任你”取决于机器人后续的持续行为。为此，系统会评估并报告已验证机器人的行为是否偏离其声明与站点偏好。

评估方式

初始评估信号包括两类：

• 机器人是否遵守网站通过 robots.txt 发布的抓取偏好（依据 RFC 9309）；
• 机器人在收到 HTTP 429“请求过多”信号后，是否减速或暂停，而非维持原有请求速率。

系统关注的是持续模式而非孤立事件，并把观察结果转化为可解释的“信任区间”，说明机器人遵守站点偏好的稳定程度及依据的行为证据。博客中区分了风险（单次请求的潜在危害，随时可变）与信任（长期一致行为累积）。文中以 2025 年将 Perplexity 的机器人移出 Verified 列表作为示例，称其访问了选择退出抓取的站点并在被阻止后试图绕过控制。

适用场景与规划

该机制与 Bot Preference Sync、Bot Management 共同构成自动流量的问责闭环：前者帮助站主发布偏好，中者观察机器人是否长期遵守偏好，后者让站主决定如何处理流量。Cloudflare 表示已在内部使用该系统，计划未来向所有客户开放，届时客户可选择用于处理已验证机器人流量的信任阈值，并计划在 Radar 上公开相关评分。

限制与待核实

来源说明系统仍处于初期阶段，公开评分与客户可配置的信任阈值均为计划而非已上线能力；文中未给出评分算法细节、阈值取值及生效日期。上述 2025 年 Perplexity 案例为来源陈述，未提供独立验证。