Cloudflare 的负责人声称，Google 正在利用网站进行“敲诈”，以获取用于训练人工智能的数据。

简短新闻概述

Cloudflare首席执行官Matthew Prince指责谷歌利用其在搜索领域的主导地位，为训练神经网络获取不公平优势。他强调，谷歌拥有海量数据，并迫使网站所有者在失去流量威胁下分享内容。

Prince具体说了什么

- 谷歌收集的网页数据是OpenAI的3.2倍；
- 是Microsoft的4.8倍；
- 超过其他搜索引擎六倍。

他指出，这种不平衡使人工智能市场变得不公平，并呼吁英国竞争管理局（CMA）在现有调查框架内审查此事。

为何重要

网络爬虫是自动化机器人，用于索引网站。

- Microsoft、OpenAI等公司使用不同的爬虫：分别用于训练人工智能和搜索结果。
- 谷歌使用同一个通用爬虫（Googlebot）既做搜索，又收集数据供AI使用。

如果出版商因保护内容不被用于训练而阻止Googlebot，它就会同时从谷歌搜索结果中消失，失去大量流量。Prince认为，只要谷歌以这种方式利用其垄断地位，就无法实现公平的人工智能市场。

进一步举措

谷歌已推出“AI Overview”——在搜索结果顶部显示AI回答块，总结网站内容，减少用户跳转到原始资源的需求。

作为回应，微软启动了许可计划：内容创作者将因其材料被用于AI训练而获得直接报酬。

结论

Cloudflare声称谷歌凭借搜索主导地位获得不成比例优势，这威胁到人工智能市场的公平与透明。公司请求监管机构介入，以确保所有参与者拥有更平等的竞争环境。