bingdadaAI爬虫付费已从概念走向可运行试点：Google「AI贡献试点」对在AI Overviews、AI Mode或Gemini中被实际用于生成答案的页面向发布者付费，发布者可在Search Console看到月度收入但无计算明细，仅被引用链接不付费；开发者Suganthan Mohanadasan于2026年9月15日通过x402协议按页收费1美分跑通代理支付，完成5笔测试网USDC结算，其中1笔来自Claude Code；Cloudflare于2026年8月Agents Week推出Wallets
搜索引荐流量与内容抓取之间的旧契约正在失效。过去，搜索引擎抓取页面、展示结果、送回访客，网站获得流量，引擎获得可展示的内容，双方各取所需。如今，AI 生成的答案可以直接消化页面信息，却不一定把用户送回原站点。这一变化迫使内容方重新思考：如果抓取不再等同于访问，那么页面被读取这件事本身，是否应该产生收入？
Google 近期的一项试点给出了官方层面的回应。并经 Google 确认，这项名为「AI 贡献试点」的计划，会在 AI Overviews、AI Mode 或 Gemini 应用中，当某个页面被判定为对答案生成有显著贡献时，向接受条款的发布者支付费用。发布者能在 Search Console 中看到月度收入数字，但看不到具体的计算明细。值得注意的是，只有在答案生成过程中被使用的页面才有资格获得报酬；如果页面只是在答案写完后被附上链接，则不在支付范围内。有熟悉该计划的高管将其形容为一个「黑盒」。据称 Google 已接触至少数十家发布者，其中小型发布者的兴趣反而高于大型机构。
与此同时，另一条技术路线正在绕过平台中介，直接让 AI 代理为访问付费。开发者 Suganthan Mohanadasan 在自己的网站上做了一项实验：页面在代理读取之前先标出价格，代理若想获取内容就需完成支付。2026 年 9 月 15 日上午，五笔支付成功结算，每笔都有公开的交易哈希。其中一笔来自 Claude Code，运行在他本机并使用他预先配置的钱包。需要说明的是，这些支付目前都来自他自己的代理，尚无搜索爬虫主动付费；所用代币也是测试网 USDC，没有真实货币价值。但支付流程本身已经跑通——代理请求页面、查看价格、完成付款、获取内容。
Cloudflare 在 2026 年 8 月的 Agents Week 期间宣布了 Wallets 产品并开放 handle 预留。预留是免费的，许多人像抢注用户名一样先占为快。Cloudflare 的设计分为两部分：账户钱包属于真人用户，可充值、设置消费上限并向代理分配资金；虚拟钱包则属于代理，在用户设定的权限和限额内自主消费。handle 为账户提供可识别的身份。不过截至 9 月 15 日，预留 handle 只能得到一个展示名称的页面和开通通知，官方文档明确说明预留的 handle 尚不能发送、接收或持有资金。
另一块拼图是 Monetization Gateway，它允许网站就资源访问向代理收费。该产品于 7 月 1 日公布，目前仍需通过等待名单申请接入。产品虽已发布，但用预留钱包跑通完整流程尚不可行。上述实验展示了当下可用的一种实现方式：借助 x402 协议，网站按页收费一美分，代理完成支付，消费限额控制其可购买的内容。这与 Cloudflare 对虚拟钱包的描述在总体安排上一致。
Cloudflare 已表示其默认策略正从「按次抓取付费」转向「按次使用付费」，并启动了与 Ceramic.ai、You.com 的试点。其理由是：抓取一个页面并不能证明内容真的被使用了。这一区分至关重要。用页面来回答问题，比单纯下载页面更能体现价值。但问题在于，网站主无法独立观察这一过程。页面离开服务器之后，它是否影响了一个答案，我无从得知。
按次使用付费意味着依赖平台告知发生了什么、价值几何；按次抓取付费则让我可以自行核对请求与支付记录。Google 试点的资格规则恰好凸显了这种张力：在答案生成期间做出贡献可以计费，事后被链接则不计费。发布者看到的是总额，而非背后的计算过程。两种路径都留有未解之处——屏蔽爬虫没有直接收入，个别授权协议又难以覆盖数百万小型网站。
在国内，AI 搜索与内容生态的付费机制尚处于更早期的阶段。百度、字节跳动等平台在 AI 搜索答案中已开始标注来源并尝试向优质内容方导流，但类似 Google「贡献试点」的按贡献分账机制尚未形成公开的标准化产品。与此同时，国内大模型厂商如 DeepSeek、通义千问、文心一言、Kimi、智谱 GLM 等在训练数据合规与内容授权方面，更多依赖既有版权合作与公开数据治理框架，而非面向长尾站点的微支付通道。
差异在于基础设施。Cloudflare 的 Wallets 与 x402 试图在协议层解决「机器对机器」的小额支付问题，而国内互联网的支付体系高度集中于少数超级应用，缺乏面向代理经济的开放结算层。这意味着国内中小内容方在 AI 时代的议价工具可能更少，短期内更可能依赖平台侧的统一授权与分成方案，而非自行向爬虫收费。
对于希望提前布局的内容方，以下步骤可作为参考：
关于 AI 爬虫与内容付费的更多行业动态，可参考 Search Engine Journal 的持续报道，以及 Cloudflare 官方博客 中关于 Wallets 与 Monetization Gateway 的技术说明。
Google 在 AI Overviews、AI Mode 或 Gemini 应用中，当判定某页面在答案生成过程中有显著贡献时向发布者付费。发布者可在 Search Console 看到月度总额，但看不到具体计算明细；答案生成后才被链接的页面不符合资格。
截至 2026 年 9 月 15 日，预留 handle 只能获得展示页面和开通通知，官方文档明确说明预留 handle 尚不能发送、接收或持有资金。完整的收款能力需等待 Wallets 正式开放。
按次抓取付费在页面被下载时计费，网站主可自行核对请求与支付；按次使用付费则在内容被实际用于生成答案时计费，更能体现价值，但网站主无法独立验证，需依赖平台披露。
屏蔽可以保护内容不被无偿使用，但可能降低在 AI 答案和训练数据中的可见度。若缺乏议价能力，屏蔽有时能促使 AI 公司回到谈判桌；若重视曝光，则需谨慎权衡。
Bingdada 是一个专注 SEO、GEO（生成式引擎优化）与 AEO（答案引擎优化）的内容平台，由资深内容编辑、SEO 技术工程师与 AI 研究专家组成的团队持续运营。我们追踪搜索引擎与生成式 AI 的最新动态，为读者提供准确、实用、可落地的方法论与行业洞察。
编辑团队：内容策划 · 技术编辑 · AI 研究组
网站：bingdada.com
© 2026 Bingdada. 保留所有权利。
SEO & GEO 技术探索者，专注于搜索引擎优化和生成式引擎优化。
联盟营销在 2026 年并未过时，但收益分布高度陡峭。本文从佣金机制、收益真相与 AI 搜索变量出发，拆解新手如何用真实内容建立可复利的推荐资产。
新闻出版商诉OpenAI与微软案披露的点击率数据，揭示聊天机器人对内容流量的分流效应。本文拆解引用量与点击量的本质差异，并对照国内AI搜索生态，研判内容方在答案引擎时代的生存逻辑。
Chartbeat 最新报告显示，其客户网络内 Google Search 同比降幅从 21.9% 扩大到 40.2%，搜索占页面浏览量份额两年从 9% 跌至 5%。与此同时，暗社交、直接访问与站内流量持续上行，忠实读者成为稳住大盘的关键。
获取最新的 SEO 与 GEO 技术资讯。
我们尊重您的隐私，随时可以取消订阅。
