Cloudflare在控制台为机器人运营方增加BotBase目录管理入口。

新流程支持运营方提交机器人或代理信息、查看审核状态并编辑已提交内容。Cloudflare同时加入行为模型,运营方可声明机器人如何使用网站内容。
相关信息在Cloudflare控制台中维护,用于完善BotBase目录中的机器人资料。提交内容和行为声明仍由机器人运营方负责,具体展示和处理遵循Cloudflare目录规则。
来源:Cloudflare Blog,发布时间:2026年8月28日。
BotBase运营方入口让机器人或代理维护者提交资料、追踪审核状态并声明系统如何使用网站内容。这类目录信息可以帮助网站运营者理解访问来源和行为意图,但一条登记记录本身不能证明爬虫身份真实、内容使用合法,也不代表每个站点都必须允许该机器人访问。
运营者提交时应确保名称、联系方式、访问模式和内容用途与实际部署一致;如果代理由第三方托管,需说明真正的运行主体和数据处理方。网站管理员则应继续结合请求速率、身份验证、robots规则、服务条款和滥用记录制定自己的访问策略,不能仅凭目录中的自我声明放行。
若机器人用途或行为发生变化,应及时更新声明,并保留提交版本和审核记录。目录能改善双方沟通,但访问控制、速率限制和争议处理仍由网站与机器人运营方分别负责。