Cloudflare quer que o Google permita que sites bloqueiem IA sem perder visibilidade nas buscas

A Cloudflare está tomando medidas para combater a coleta de dados não regulamentada realizada por rastreadores de IA. No entanto, segundo o CEO da empresa, avanços reais também exigirão a cooperação das grandes companhias de inteligência artificial — e pode ser que essa cooperação nunca aconteça.

Recentemente, a Cloudflare anunciou um novo sistema de “pagamento por rastreamento” (pay-per-crawl), com o objetivo de pressionar empresas de IA que continuam extraindo dados da web aberta sem pagar nada por isso. De acordo com o CEO Matthew Prince, esse esforço deveria ser apoiado justamente pelas empresas que estão fazendo o rastreamento.

Prince participou de uma discussão na rede X (antigo Twitter) para detalhar a nova iniciativa da Cloudflare. Ele confirmou que o bot Gemini, do Google, está bloqueado por padrão e afirmou que a empresa está trabalhando para pressionar o Google a oferecer uma maneira prática de bloquear recursos específicos de IA — como o Answer Box e os resumos gerados por IA (AI Overviews) — enquanto ainda permite o rastreamento tradicional por bots de indexação de busca.

Prince destacou que é sim possível bloquear os rastreadores de IA do Google sem interferir nos processos padrão de indexação da web. Ele acrescentou que a Cloudflare está desenvolvendo uma solução para tornar essa separação mais fácil para os donos de sites. Embora a indexação de conteúdo tradicional tenha sido por muito tempo a espinha dorsal da internet, a ascensão da chamada “Internet de Clique Zero” ameaça desequilibrar esse modelo.

Grandes empresas de tecnologia e iniciativas de chatbots de IA estão explorando a internet pública de forma agressiva, com enxames incessantes de bots projetados para colher cada pedaço de conteúdo criado por humanos disponível online. Mesmo projetos robustos como a Wikipédia, estruturados para lidar com bilhões de usuários globalmente, estão agora enfrentando dificuldades diante do rastreamento desregulado impulsionado por IA.

Segundo Prince, o novo plano da Cloudflare busca preservar a acessibilidade da web para usuários humanos enquanto limita os abusos relacionados à IA. Mas e se a estratégia falhar e o Google simplesmente se recusar a cooperar com a rede de entrega de conteúdo?

No pior cenário, disse Prince, pode se tornar necessário implementar exigências legais que obriguem empresas como o Google a separar seus rastreadores de IA dos bots padrão de indexação de busca. Ele observou que isso não seria algo especialmente difícil de fazer, embora ainda espere que novas legislações anti-bots possam ser evitadas.

Com a tecnologia evoluindo em ritmo acelerado e a influência política perdendo força frente ao poder de lobby das gigantes da tecnologia, impor regulações razoáveis contra abusos digitais está se tornando cada vez mais difícil. Embora o plano de Prince possa parecer idealista, alguns acreditam que a atual bolha supervalorizada da IA pode eventualmente estourar, redefinindo a narrativa e freando a onda de exploração alimentada pela inteligência artificial.

Foto de Marcelo Roncate
Foto de Marcelo Roncate O autor:

Redator desde 2019. Entusiasta de tecnologia e criptomoedas.