主要观点总结
Cloudflare推出AI审计功能,可查看和分析AI爬虫的行为,包括归属公司、抓取资源、频次等。网站管理员可以禁止特定AI公司的爬虫抓取,甚至禁止所有AI爬虫。此功能目前处于测试阶段。
关键观点总结
关键观点1: Cloudflare为所有网站带来AI审计功能
该功能可以分析AI公司的爬虫行为,包括归属、抓取资源、频次等。
关键观点2: AI审计功能处于测试阶段
新的AI审计工具(Cloudflare AI Audit)可帮助内容创作者和网站管理员了解他们的内容被哪些AI公司抓取。
关键观点3: 网站管理员可以禁止特定AI爬虫抓取
如果未与AI公司达成内容授权协议,可以通过爬虫抓取频次进行封禁,避免耗费服务器资源和影响用户体验。
关键观点4: Cloudflare计划推出交易市场
允许网站管理员设置内容抓取价格,AI公司可以付费获取抓取权限。
文章预览
#网络服务 Cloudflare 为所有网站带来 AI 审计功能,可以检查 AI 爬虫归属哪家公司、何时来抓取哪种资源、抓取的资源数据、抓取频次等。如果网站管理员不希望一个或多个爬虫抓取自己网站的数据,还可以直接屏蔽特定 AI 公司的爬虫,当然也可以直接屏蔽所有 AI 公司的爬虫。查看全文:https://ourl.co/105934 网络服务提供商 Cloudflare 宣布即日起为所有网站 (包括免费托管的网站) 带来 AI 审计功能,该功能目前处于测试阶段,可以分析 AI 公司的爬虫和抓爬数据。 新的 AI 审计工具 (Cloudflare AI Audit) 主要提供 AI 公司的爬虫何时到网站来抓取数据、抓取的数据地址、抓取频次以及其他分析数据。 内容创作者和网站管理员可以借助 AI 审计功能轻松检查自己的内容被哪些 AI 公司白嫖了,如果被白嫖难受的话,也可以直接一键禁止抓取。 其中 AI 审计工具中的禁
………………………………