Crescimento do Tráfego de Bots de IA

Medições recentes de uma empresa de infraestrutura de internet revelam que bots impulsionados por IA agora representam uma parcela notável de todas as visitas à web. No quarto trimestre de 2025, em média, uma em cada 31 visitas a sites participantes originou-se de um bot de raspagem de IA, um aumento acentuado em relação ao número do primeiro trimestre, de uma em cada 200. Os mesmos dados mostram um aumento constante no tráfego gerado por bots que buscam informações em tempo real para agentes de IA, indicando uma mudança mais ampla na forma como sistemas automatizados interagem com conteúdo online.

Bots Ignorando Controles

Análises indicam que mais de 13 por cento das solicitações de bots ignoraram o arquivo robots.txt, um padrão utilizado por sites para sinalizar quais páginas não devem ser acessadas por agentes automatizados. A proporção de bots de IA que ignoram o robots.txt aumentou 400 por cento do segundo trimestre para o quarto trimestre do ano anterior. Esses bots cada vez mais imitam o comportamento normal de navegadores, tornando seu tráfego quase indistinguível de visitantes humanos e complicando os esforços de detecção.

Resposta da Indústria

Os proprietários de sites estão reagindo com um aumento nas medidas defensivas. Ao longo do último ano, o número de sites tentando bloquear bots de IA cresceu 336 por cento, de acordo com a empresa de relatórios. Ferramentas estão sendo implantadas para identificar e filtrar o tráfego de bots, enquanto alguns provedores estão desenvolvendo soluções que permitem que os sites cobrem dos raspadores automatizados para acessar seu conteúdo. Grandes empresas de segurança, incluindo a Cloudflare, estão oferecendo capacidades semelhantes, visando proteger o valor do tráfego gerado por humanos.

Os editores, que dependem fortemente de visitantes humanos, estão particularmente preocupados com o impacto do tráfego automatizado na receita de publicidade e na integridade do conteúdo. A "corrida armamentista" contínua entre desenvolvedores de bots e operadores de sites está moldando o futuro aspecto, sensação e funcionalidade da web, como destacado por um diretor de tecnologia da empresa de infraestrutura.

Oportunidades de Negócios Emergentes

O aumento da raspagem impulsionada por IA deu origem a um novo segmento de mercado. Mais de 40 empresas agora comercializam bots que coletam conteúdo da web para treinamento de IA e outros propósitos. Algumas empresas se concentram em ajudar o conteúdo a aparecer proeminente em ferramentas de IA, uma prática conhecida como otimização de motor de geração. Executivos de uma empresa de otimização de conteúdo descrevem isso como o surgimento de um novo canal de marketing que combina busca, publicidade, mídia e comércio.

Embora muitos serviços de raspagem afirmem que visam apenas informações publicamente disponíveis, eles reconhecem a dificuldade de aderir a fronteiras técnicas complexas estabelecidas por sites. A tensão entre o acesso automatizado legítimo — como para cibersegurança ou jornalismo investigativo — e a raspagem maliciosa continua a impulsionar a inovação em ambos os lados da equação.

Usado: News Factory APP - descoberta e automação de notícias - ChatGPT para Empresas