Uma análise recente revelou que o ChatGPT-User, um rastreador da OpenAI, está realizando 3,6 vezes mais solicitações do que o Googlebot. O estudo, conduzido pela plataforma de habilitação de rastreadores da Alli AI, examinou 24.411.048 solicitações de proxy em 69 sites de clientes entre janeiro e março de 2026. Durante esse período, o ChatGPT-User fez 133.361 solicitações, superando não apenas o Googlebot, mas também outros rastreadores como o Amazonbot e o Bingbot.
Os rastreadores de IA, incluindo ChatGPT-User, GPTBot, ClaudeBot e outros, acumularam um total de 213.477 solicitações, enquanto os rastreadores de busca tradicionais, como Googlebot e Bingbot, somaram apenas 59.353. Isso indica que os rastreadores de IA estão se tornando predominantes na coleta de dados online.
A OpenAI opera dois rastreadores principais: o ChatGPT-User, que busca páginas em tempo real para responder a perguntas dos usuários, e o GPTBot, que coleta dados para treinar modelos de IA. Juntos, eles realizaram 142.225 solicitações, o que representa 3,8 vezes o volume do Googlebot.
Os rastreadores de IA são mais rápidos e confiáveis, com o ChatGPT-User apresentando uma taxa de sucesso de 99,99% e um tempo médio de resposta de 11ms. Em comparação, o Googlebot tem uma taxa de sucesso de 96,3% e um tempo de resposta de 84ms. No entanto, o grande volume de solicitações de IA pode sobrecarregar a infraestrutura dos servidores.
O Googlebot enfrenta dificuldades devido ao seu índice legado, que inclui URLs desatualizadas, resultando em uma taxa de erro de 3%. Em contraste, os rastreadores de IA focam em conteúdo relevante e atual, garantindo quase 100% de sucesso nas solicitações.
Relatórios indicam um aumento de 15 vezes no rastreamento por IA em 2025. Empresas como Cloudflare e Akamai destacam o crescimento dos rastreadores da OpenAI. Para otimizar a visibilidade, é recomendado auditar o arquivo robots.txt para incluir diretrizes específicas para rastreadores de IA e limpar URLs obsoletas no Google Search Console.
Fonte:https://www.searchenginejournal.com/chatgpt-googlebot-crawl-data-alliai-spa/570885/
