Cloudflare bloqueia bots de IA para proteger conteúdo de sites por padrão

A Cloudflare anunciou que começará a bloquear automaticamente crawlers de inteligência artificial (IA) para novos domínios, permitindo que os proprietários decidam sobre o acesso a esses bots. A mudança, que entra em vigor a partir de terça-feira, visa proteger o conteúdo original e reverter a dinâmica de monetização para publicadores.

Com essa nova configuração, todos os sites que se inscreverem na Cloudflare serão questionados se desejam permitir o acesso de crawlers de IA. Essa ação pode impactar significativamente a capacidade de desenvolvedores de IA em treinar seus modelos, já que esses bots são usados para coletar grandes quantidades de dados. Matthew Prince, cofundador e CEO da Cloudflare, afirmou que a iniciativa busca devolver o poder aos criadores de conteúdo, enquanto ainda apoia a inovação das empresas de IA.

A Cloudflare, que gerencia cerca de 16% do tráfego global da internet, já havia introduzido uma ferramenta em setembro do ano passado que permitia aos editores bloquear crawlers de IA com um único clique. Agora, essa proteção se torna padrão para todos os sites que utilizam seus serviços. Prince destacou que a coleta indiscriminada de dados por empresas de IA tem prejudicado a receita de publicadores, uma vez que os usuários não precisam mais visitar as fontes originais.

Reações do Setor

A nova política foi bem recebida por várias empresas de mídia e plataformas online. Prashanth Chandrasekar, CEO da Stack Overflow, enfatizou que plataformas que contribuem para o treinamento de modelos de linguagem devem ser compensadas. A Cloudflare também planeja implementar um sistema de “pagamento por rastreamento”, que compensará os proprietários de sites quando um bot de IA acessar seu conteúdo.

Entretanto, há preocupações sobre como essa mudança pode afetar usos não comerciais, como pesquisas acadêmicas. Shayne Longpre, candidato a PhD no MIT Media Lab, alertou que nem todos os sistemas de IA competem diretamente com editores da web. A Cloudflare busca equilibrar a proteção dos criadores de conteúdo com a necessidade de manter a abertura da internet, permitindo negociações mais sustentáveis entre empresas de IA e proprietários de sites.