Cloudflare挑战谷歌:AI终于要为互联网内容付费了吗?
随着人工智能产业的快速发展,其引发的矛盾也日益突出, AI 在训练阶段使用了互联网上的海量版权材料,却未向版权人付费。最近全球顶尖的互联网基础设施企业 Cloudflare 公司推出了一套新方案,希望帮助网站建立 AI 内容授权与收费机制。而他们最大的绊脚石,则是互联网头号搜索引擎和 AI 巨无霸谷歌,今天就和大家聊下这个事情。 一、 Cloudflare 如何帮网站向 AI 公司收费? 先说下 Cloudflare 是干什么的? Cloudflare 是互联网流量的一层底层关卡,它有能力在内容到达源服务器之前,就决定谁能进、谁不能进。很多朋友访问海外网站时会遇到一个五秒等待页面,那就是 Cloudflare 在替网站过滤网络攻击。 Cloudflare 以 CDN (内容分发网络)和网络安全服务起家。目前全球超过 20% 的网络流量经过 Cloudflare 的基础设施处理,其中包括 36% 的全球最高访问量网站。 Cloudflare 推新政策时机很微妙,其公布的数据显示,目前全球互联网流量中,机器人流量已经首次超过人工流量,其中 AI 机器人占比快速增长。与此同时, OpenAI 、 Anthropic 等公司商业模式逐渐成熟,外界普遍预期未来一两年内将进入资本市场。 而随着人工智能产业商业模式的确立,其和版权人的矛盾却日益突出。主要矛盾在于, AI 在训练阶段使用了全球几乎所有可获取的版权材料,却未向版权人付费。此外, AI 若想进一步发展,需使用版权人创作的新内容,如何为这部分新内容付费成为矛盾焦点。 7 月 1 日, Cloudflare 宣布将 AI 爬虫正式分为三类:搜索类( Search )、训练类( Training )和智能体类( Agent ,即代替用户在线执行任务的自动化程序)。每一类爬虫必须明确声明身份,配合使用独立的访问令牌和可验证的 IP 段,让网站主可以精细管理:哪类爬虫能进、哪类要付费、哪类直接封杀。通过匿名方式或伪造身份爬取的服务商,将可能被 Cloudflare 在全网范围内拦截。该方案的核心在于,迫使 AI 产业心甘情愿或不得不付费。 二、为什么谷歌被针对了? 但 Cloudflare 这套新政策要确立,首先得跨越一座叫谷歌的大山。 为什么是谷歌?因为 Cloudflare 方...