网站流量突然上涨,站长差点打开香槟。再看广告收入,安静得像没人值班的收银台。原来来的不是读者,而是一群自动抓文章的程序。都来了,倒是看个广告再走啊!
玩笑背后有个现实问题:人工智能把文章读走,直接在别的服务回答问题,读者不一定会回到原网站。2026年出现了向这些程序收费的办法。但装上收费门,并不代表门外排队的程序都会掏钱。
抓走文章不等于看了广告
网页收到一次请求,只证明有人或程序请求内容。很多程序只取走文章文字,根本不加载广告。即使加载了广告,广告平台还必须认可这次展示。
Google AdSense禁止制造虚假广告展示和点击。Adsterra也介绍了对自动虚假流量的识别。把程序伪装成真人,试图骗取广告收入,可能导致广告账户受限。广告主想找到可能购物的人,不需要一台假装逛街的机器。
所以网页请求数、广告加载数、平台认可的展示数,是三个不同数字。
抓取程序也有分工
Googlebot帮助网页出现在搜索结果。OAI-SearchBot和PerplexityBot帮助人工智能搜索发现文章。GPTBot收集可能用于改进人工智能的材料。ChatGPT-User可能因为某位用户请求助手阅读指定网页而访问。身份不明的程序可能检查链接、复制内容,也可能寻找安全漏洞。
搜索程序有机会带来真人读者,训练用程序却未必会直接带来访问。此外,程序可以自报名字,不代表身份一定真实。
把所有程序一概拦住,就像嫌导游不买东西,连他后面的游客一起赶走。
被人工智能引用,广告会有收入吗?
不一定。如果读者只看了人工智能生成的答案,没有进入原网页,就看不到原网站的广告。反过来,如果答案附有链接,而且真人点开网页,正常的广告收入仍然可能发生。
需要分开统计程序抓取、真人访问、有效广告展示和内容收费。程序读了一千遍,不是来了一千个顾客。
Cloudflare可以给文章入口贴价格
帮助网站运行和防护的Cloudflare推出了Pay Per Crawl。站长可以对识别出的人工智能抓取程序分别选择:免费进入、付费进入或禁止进入。
支持付款的程序同意收费并成功取得内容后,费用才会被记录。不支持付款的程序遇到收费要求,可能只是进不去。贴价格标签不等于每个路过的人都买单。
截至2026年10月9日,这项付费功能仍在封闭测试。能查看自动访问数据,不代表账号已经具备收款资格。
一万次访问值多少钱?
官方列出的最低基础价格是每次成功付费抓取0.001美元。按照这个价格,1,000次真正完成的付费抓取累计1美元,10,000次累计10美元。只是扣除可能费用之前的计算示例,并非收入预测。
免费的搜索抓取、拒绝付款的程序和失败的请求不能算进去。程序来得再多,实际付款为零,收入也就是零。访问量满屋跑,收银台还在打瞌睡。
怎么试才不把读者挡在外面?
先进入Cloudflare控制面板的AI Crawl Control,看清哪些公司的程序抓取了哪些文章、次数是多少、有没有成功。再与真人从搜索或人工智能来源链接进入网站的数据比较。
随后申请Pay Per Crawl封闭测试。获得资格之后,由管理员打开域名对应的设置,设定默认价格,再选不同程序免费、付费还是拦截。收款需要按Cloudflare要求连接专用Stripe账户,不能认定原有Stripe账户可以直接使用。
别急着给整个网站上锁。先从少数文章测试,关注付款成功次数、搜索能见度和真人访问。也可以保留免费页面或针对不同内容定价,但简单实验更容易判断效果。
搜索程序值得收费吗?
可能不值得。Cloudflare提醒,对搜索程序收费或拦截会影响网页被发现的机会。OpenAI也分别介绍了搜索用途的OAI-SearchBot和可能收集训练资料的GPTBot;两种访问可以用不同规则。
具体用途随时间可能变化,应该查看最新的官方说明和实际访问记录。一次免费搜索抓取如果带来了很多真人,可能比收取微小通行费更划算。
还有一种“用到时才付钱”的模式
Cloudflare在2026年9月30日宣布Pay Per Use测试服务。参与的人工智能公司提出某种实际使用文章的价格,例如把内容用于回答,网站所有者可以接受或拒绝。买方报告发生了哪些使用,平台据此处理账单。它不能神奇地发现所有未申报的内容利用。
另一项测试工具Monetization Gateway适用于程序每次请求数据或工具时支付费用。拿走文章、在答案里使用文章、调用工具,是三种不同的生意。
结论
先问清谁在来、谁带来真人、谁真的愿意付钱、限制访问之后会失去什么。让机器人假装人类看广告不是好生意。
从“来都来了看个广告吧”,变成“这篇文章对你有用?那来谈谈价格”。网站与人工智能之间,正在出现新的交易方式。
