Cloudflare lança marketplace que permite cobrar bots de IA
Cloudflare lanca marketplace: A Cloudflare anunciou nesta terça-feira (1º de julho de 2025) o lançamento de um marketplace inovador chamado Pay per Crawl, onde proprietários de sites poderão cobrar empresas de inteligência artificial (IA) pelo acesso e coleta de dados de seus conteúdos online. A iniciativa chega em um momento em que cresce a preocupação de publishers sobre o uso não autorizado de suas informações para treinar modelos de IA, prometendo maior transparência, controle e até geração de receita no novo cenário digital.
Tabela de conteúdos
Como funciona o Pay per Crawl
O Pay per Crawl está sendo lançado em beta privada e propõe que donos de sites possam autorizar, bloquear ou definir tarifas para que bots de IA acessem suas páginas a cada “crawl” (coleta automatizada). É possível, por exemplo, permitir que alguns crawlers acessem gratuitamente, definir micropagamentos para outros ou simplesmente bloquear o acesso.
Empresas de IA e publishers interessados precisam ter contas na Cloudflare. Por meio da plataforma, ambos acordam tarifas para cada requisição. A Cloudflare atua como intermediária, recebendo dos compradores (empresas de IA) e repassando os ganhos aos publishers.
O contexto da nova iniciativa
O lançamento ocorre em meio à crescente desvalorização dos modelos tradicionais de monetização de conteúdo digital. Com a diminuição do tráfego por mecanismos de busca como o Google — historicamente uma fonte vital de visitas em troca do “scraping” por crawlers da própria empresa —, publishers agora encaram os desafios impostos por chatbots de IA, que sintetizam informações e entregam respostas sem menção ou redirecionamento ao site de origem.
Dados revelados pela Cloudflare mostram a dimensão do problema: em junho, o crawler do Google realizou 14 extrações de página para cada visita enviada ao site, enquanto o da OpenAI fez 1.700 coletas para uma única referência, e o da Anthropic alcançou a marca impressionante de 73 mil “scrapes” para cada visita devolvida. Para os editores, esta equação pouco vantajosa exige novas estratégias.
Bloqueio padrão e apoio de grandes publishers
A Cloudflare anunciou ainda que todos os novos sites criados na plataforma agora bloqueiam, por padrão, todos os bots de IA, exigindo concessão ativa de permissão pelo dono do site. Grandes publishers, incluindo nomes como Conde Nast, TIME, The Associated Press, The Atlantic, ADWEEK e Fortune, apoiaram a abordagem baseada em permissão, reforçando a busca por maior autonomia na gestão de seus dados frente aos avanços da inteligência artificial.
Licenciamento: impasse e oportunidades para editores
Apesar de gigantes da mídia como The New York Times terem recorrido à justiça contra o uso indevido de seus textos por IA, outros players optaram por negociar acordos de licenciamento multimilionários com empresas do setor. Entretanto, tais contratos se restringem a conglomerados robustos, excluindo a maior parte dos pequenos e médios editores do novo ciclo de receitas digitais.
O Pay per Crawl pretende democratizar o acesso — permitindo que qualquer publisher defina seus próprios termos de licenciamento, mesmo que em micropagamentos individuais por acesso de bots. A Cloudflare acredita que o verdadeiro potencial desse mercado está em um futuro “agente programável”, onde ferramentas e agentes de IA negociariam o acesso de forma dinâmica e programática, aumentando a sustentabilidade do ecossistema de conteúdos online.
A perspectiva do futuro: agentes e paywall programático
Matthew Prince, CEO da Cloudflare, vislumbra cenários em que agentes de IA autônomos contratariam acesso premium a dados em tempo real para compor respostas detalhadas a comandos dos usuários — como sínteses de pesquisas científicas, pareceres jurídicos ou recomendações personalizadas. Nesse modelo, um “paywall agentico” funcionaria na borda da rede, garantindo pagamento automático para acesso ao conteúdo de maior valor.
Desafios, limitações e próximos passos
Analistas apontam que o sucesso do marketplace depende da adesão em larga escala tanto de publishers quanto das próprias empresas de IA, as quais atualmente extraem boa parte dos dados de maneira gratuita. Além disso, a plataforma não utiliza, por enquanto, moedas digitais ou criptomoedas, apesar do formato micropagamento parecer adequado a essas ferramentas. A Cloudflare, por meio de sua porta-voz Ripley Park, esclareceu que não há previsão imediata para adoção desse tipo de pagamento.
O movimento da Cloudflare é visto como um dos mais ousados na busca por redefinir as bases econômicas do conteúdo online na era da IA, estabelecendo novas regras de valor e permissão no relacionamento entre criadores, empresas de tecnologia e usuários finais.
Considerações finais sobre Cloudflare lanca marketplace Pay per Crawl
O lançamento do Pay per Crawl pela Cloudflare sinaliza a tentativa de reequilibrar as relações de poder e valor entre publishers e as maiores empresas de IA do planeta. Apesar dos desafios — e sem soluções mágicas evidentes —, o marketplace pode inaugurar um novo paradigma de autonomia, remuneração e sustentabilidade digital para um dos setores mais impactados pelas transformações tecnológicas recentes.
O que é o Pay per Crawl da Cloudflare?
O Pay per Crawl é um marketplace inovador lançado pela Cloudflare em 2025 que permite que donos de sites definam preços, bloqueiem ou liberem o acesso de bots de IA ao conteúdo de suas páginas, buscando oferecer maior controle e fonte de receita para publishers.A ferramenta foi criada para enfrentar os desafios impostos pelo uso de crawlers de IA, que frequentemente coletam dados sem remuneração e referenciam pouco os sites originais. A Cloudflare atua como intermediária nas negociações entre publishers e empresas de IA.
Como funciona a cobrança por cada crawl?
O proprietário do site define um preço para cada acesso (crawl) realizado por bots de IA, ou pode optar por liberar gratuitamente ou bloquear totalmente tais acessos. As empresas interessadas pagam à Cloudflare, que repassa o pagamento ao dono do conteúdo.O modelo permite micropagamentos e acordos personalizados, tornando o processo transparente e favorável à negociação direta entre as partes envolvidas.
Quais publishers apoiam o bloqueio de bots de IA?
Grandes nomes como Conde Nast, TIME, The Associated Press, The Atlantic, ADWEEK e Fortune apoiaram a Cloudflare no bloqueio padrão de crawlers de IA, endossando a abordagem baseada em permissão proposta pela empresa.Esses grupos participaram do movimento para atribuir mais poder de decisão aos publishers sobre o licenciamento e uso de seu conteúdo por veículos de IA.
O marketplace da Cloudflare aceita criptomoedas?
Atualmente, o Pay per Crawl não utiliza stablecoins nem criptomoedas para os micropagamentos. Embora o setor considere essas tecnologias adequadas à proposta, a Cloudflare informou que só trabalha com métodos tradicionais no momento.A empresa estuda alternativas, mas não há previsão concreta para implementação de pagamentos digitais.
Quais os maiores desafios para o sucesso do Pay per Crawl?
O principal desafio é convencer empresas de IA a aderirem e remunerarem pelo uso de conteúdo, já que atualmente muito é coletado sem pagamento. Também será necessário obter engajamento em larga escala entre publishers para que o modelo seja sustentável.O equilíbrio entre preço justo, acesso e escala será determinante para o novo ecossistema proposto pela Cloudflare.
