想要限制谷歌的AI爬虫，Cloudflare的目的为何？
在AI技术迅速发展的背景下，AI爬虫的广泛应用，与当下人们关注隐私信息安全的现状无疑是十分矛盾的。为了应对这一问题，云服务提供商Cloudflare宣布将默认阻止AI爬虫在未经网站所有者许可或补偿的情况下抓取其内容。
虽然这一举措看似是为了保护内容创作者的权益，但也有网友指出Cloudflare这一行为背后的动机并不简单，也有可能是为了推介自身的项目。
根据Cloudflare高管近日的发言表示，公司正在与谷歌进行谈判，要求后者将传统搜索引擎的爬虫与AI爬虫分离，以此来方便网站可以根据自身需求决定是否屏蔽AI爬虫。Cloudflare声称，如果谷歌拒绝这一要求，他们将会考虑推动立法来强制对方分离。
不过这一举措显然会遭到谷歌的强烈反对，毕竟AI搜索是谷歌的重要业务之一，一旦AI爬虫无法抓取内容，谷歌的市场竞争力将会受到严重影响。明知道这样是挑战谷歌的底线，为什么Cloudflare仍然选择站出来呢？
实际上，Cloudflare自己也在最近推出了一个名为Pay Per Crawl的交易平台，该平台旨在为内容创作者和AI厂商提供一个撮合交易的场景。
为了实现这一目标，Cloudflare早在一年前就推出了AI审计工具，向网站站长报告AI厂商的爬虫访问情况。通过这种方式，Cloudflare希望能够在内容创作者和AI厂商之间建立一个交易平台，从中获取收益。
目前的情况是，虽然内容创作者对Pay Per Crawl有着迫切的需求，但AI厂商却并不热衷于这一模式。AI厂商已经习惯了免费爬取内容，不愿意让Cloudflare作为中间商赚取差价，否则训练AI的成本会极大程度增加。
其实谷歌自己也有针对这方面的解决方案，采用的是与Cloudflare不同的模式。Cloudflare的此举，无疑也是在帮助自己拉拢用户的一种手段而已。