Cloudflare anunciou um novo recurso chamado “Pagamento por Rastreamento”, permitindo que proprietários de sites cobrem rastreadores de IA pelo acesso ao seu conteúdo.
Isso marca a primeira implementação em larga escala do código de resposta HTTP 402 Pagamento Requerido, um padrão há muito tempo não utilizado, dando aos editores e criadores mais controle sobre como e quando os modelos de IA podem indexar ou treinar seu trabalho.
O que é pagamento por rastreamento?
Hoje, muitos proprietários de conteúdo enfrentam uma decisão binária: bloquear completamente os rastreadores de IA ou permitir acesso ilimitado gratuitamente. CloudflareO novo sistema da introduz uma terceira opção: cobrar dos rastreadores por solicitação usando um mecanismo integrado de cobrança e verificação.
Com o Pay Per Crawl, os proprietários de conteúdo que usam Cloudflare pode:
- Carregar rastreadores de IA por solicitação
- Bloquear ou permitir rastreadores específicos conforme necessário
- Usar um mecanismo baseado em regras para controlar preços e acesso após políticas de bot/WAF existentes
O recurso está atualmente em beta privado, mas sinaliza uma mudança em direção a uma web mais monetizável e baseada em permissão, especialmente no contexto de scraping generativo de IA.
Como Funciona
Os rastreadores de IA devem se autenticar com Cloudflare usando o padrão Web Bot Auth, um método que verifica a identidade de um rastreador usando cabeçalhos HTTP assinados e criptografia de chave pública.
Quando um rastreador acessa o conteúdo:
- Se incluir uma intenção de pagamento, o conteúdo é veiculado (HTTP 200 OK).
- Caso contrário, o servidor responde com HTTP 402 Pagamento Necessário, junto com um preço.
- Os editores podem definir uma taxa fixa ou ignorar a cobrança para bots específicos.
- As transações financeiras são geridas por Cloudflare como o comerciante registrado.
Isso significa que mesmo que uma empresa de IA não tenha nenhum relacionamento anterior com um editor, agora ela pode ser cobrada pelo acesso ou ser bloqueada programaticamente com um convite para pagar.
Nossa opinião: A jogada maior e por que ela importa
O que há nisso Cloudflare?
Pelo que vemos, Cloudflare não está apenas resolvendo um problema do editor, mas também está preparando o terreno para uma camada de licenciamento web programável que pode remodelar a economia da IA, da pesquisa e até mesmo dos assistentes pessoais.
Em escala, o Pay Per Crawl poderia:
- Padronize os preços de conteúdo digital em milhões de domínios
- Crie um mercado de licenciamento em tempo real para agentes e scrapers de IA
- Permitir que os proprietários da web monetizem seletivamente diferentes tipos de conteúdo (por exemplo, avaliações, pesquisas, fóruns)
A longo prazo, isso posiciona Cloudflare como a camada de compensação para interações entre máquina e conteúdo, com faturamento, identidade e aplicação de regras gerenciados na borda. Se agentes inteligentes se tornarem dominantes na forma como os usuários consomem a web (via Siri, ChatGPT, ou ferramentas verticais de IA), Cloudflare pode se tornar a cabine de pedágio padrão que rege o acesso, a conformidade e a monetização.
Por que isso é importante para hospedagem e editores
Esta mudança é particularmente relevante para redações, blogs, fóruns e sites de análise de hospedagem como HostScore.net – todos produzindo conteúdo original e de alto valor, frequentemente extraído por modelos de IA.
Até agora, os acordos de licenciamento entre editoras e desenvolvedores de IA eram pontuais, difíceis de escalar e acessíveis apenas a grandes grupos de mídia. O Pay Per Crawl permite que qualquer proprietário de domínio defina preços para rastreadores e, potencialmente, obtenha receita quando os sistemas de IA usam seu conteúdo para treinamento ou inferência.
Para o espaço de hospedagem, também levanta questões estratégicas:
- Os provedores de hospedagem devem oferecer suporte a recursos de pagamento por rastreamento em seus painéis?
- Os limites de largura de banda ou de rastreamento se tornarão um fator na escolha de um host da web?
- Poderia precificar APIs e esquemas de metadados evoluem para oferecer suporte ao licenciamento dinâmico de acesso à IA?
CloudflareA implementação do pode estabelecer a base para padrões de monetização mais amplos na web aberta — não apenas para treinamento de IA, mas também para futuros aplicativos de agência que consomem conteúdo em nome dos usuários finais.
Quem pode usar Cloudflare "Pagamento por rastreamento"?
O recurso está atualmente disponível em beta privado. Cloudflare é convidativo:
- Operadores de rastreadores de IA dispostos a pagar pelo acesso ao conteúdo
- Editores e criadores de conteúdo que desejam cobrar pelo acesso
Os interessados podem se inscrever através do cloudflare.com/paypercrawl-signup.
