Os rastreadores de IA ocasionalmente têm maior cobertura do que a Pesquisa Google

Durante décadas, o Google tem sido o líder incontestável na coleta de informações da Internet e é, sem dúvida, o exemplo mais proeminente de um rastreador de sites. Esses programas automatizados rastreiam a Internet e registram o conteúdo que encontram, permitindo que os mecanismos de pesquisa tornem os sites detectáveis. Mas a Pesquisa Google está enfrentando concorrência, pois os sistemas de IA também exigem dados da Internet, e é por isso que empresas de IA, como a OpenAI, estão implantando seus próprios bots para pesquisar informações na Internet.

No final de agosto de 2025, o provedor de hospedagem na Web Hostinger realizou um estudo sobre a acessibilidade de 5 milhões de sites aos rastreadores. O que chama a atenção é que, por exemplo, o bot GPT da OpenAI alcançou 4,4 dos 5 milhões de sites, obtendo assim uma cobertura maior do que o bot do Google, que acessou "apenas" 3,9 milhões de sites. Os bots menos conhecidos, como o rastreador de SEO da Ahrefs, o bot Claude da Anthropic e os rastreadores do Meta, TikTok, Bing e Apple também foram muito ativos, gerando um total combinado de cerca de 1,4 bilhão de solicitações diárias para os 5 milhões de sites.

O fato de alguns bots atingirem uma porcentagem menor de cobertura do que outros não significa que eles ignoram determinadas partes da Internet. Em vez disso, os programas alternam seus alvos e, assim, criam um mapa quase completo da Internet em um período de tempo mais longo (mas ainda dentro de algumas semanas).

O estudo também mostra que cerca de 80% das consultas se originam de empresas de tecnologia dos EUA, cerca de 10% da China, e outros países representam uma proporção insignificante. Isso significa que a indexação da Internet é dominada principalmente por provedores dos EUA e, dentro desse país, por algumas grandes empresas de tecnologia. Como resultado, um pequeno número de plataformas tem grande influência sobre o conteúdo visível e as respostas geradas pelos sistemas de IA.