A Cloudflare anunciou planos para bloquear rastreadores da web de uso misto que indexam sites para mecanismos de pesquisa e servem como agentes de IA. Essa mudança marca um afastamento da política anterior da empresa, que permitia aos clientes optar por não permitir que seus sites fossem copiados para chatbots de IA. A Cloudflare agora está adotando uma postura mais defensiva por padrão.
O CEO Matthew Prince declarou: “Agora que a maior parte do tráfego na Internet não é humano, devemos ir mais longe e agir mais rapidamente para que possa surgir um ecossistema sustentável”. A nova política foi projetada para fornecer aos proprietários de sites maior controle sobre como seu conteúdo é usado pelas empresas de IA, ao mesmo tempo que mantém a visibilidade e as oportunidades comerciais.
A partir de 15 de setembro de 2026, novos clientes e assinantes existentes da Cloudflare que lançarem novos sites terão como padrão permitir a pesquisa, mas bloquear o treinamento de IA e o uso de agentes para páginas que hospedam anúncios. Rastreadores de uso misto que não permitem que proprietários de sites controlem o uso de IA também serão bloqueados em páginas com suporte de anúncios. Os usuários de contas gratuitas farão a transição para esses novos padrões, a menos que desistam antes do prazo.
A Cloudflare está aprimorando seu recurso Pay Per Crawl, agora chamado Pay Per Use. Essa mudança permite que os proprietários de sites obtenham receita com base em como seu conteúdo é usado nas respostas do chatbot de IA, em vez de simplesmente em rastreamentos. Atualmente, a empresa está fazendo parceria com Ceramic.AI e You.com, sugerindo esforços para envolver mais empresas de IA.
A política também parece atingir o Google indiretamente. O anúncio da Cloudflare indica que o “maior mecanismo de busca tem acesso a cerca de 2 vezes mais informações do que as principais empresas de IA”, pois integra indexação de busca com treinamento em IA. O Googlebot é responsável pela indexação e pelo treinamento, mas os editores não têm opções para separar o uso do conteúdo entre a pesquisa tradicional e os aplicativos de IA.
A Cloudflare visa incentivar rastreadores de uso misto a adotar distinções mais claras entre funções de pesquisa e treinamento de IA. As novas medidas são posicionadas como uma estratégia para levar o Google e outras empresas com práticas semelhantes a reverem as suas abordagens.
