Aprender

Quais crawlers de IA os donos de sites pesquisam? Dados de busca de 16 bots

Quando um user agent estranho aparece nos logs do servidor, as pessoas pesquisam o nome dele. Levantamos essa demanda para 16 crawlers de IA — e descobrimos que os bots que decidem se você será citado são justamente os que ninguém pesquisa.

Uma grade de robôs crawlers, três deles marcados como bloqueados
Pesquisa

Principais conclusões

Os dados

User agentOperador · funçãoEUA / mêsMundo todo / mês
GPTBotOpenAI · treinamento3501,900
BytespiderByteDance · crawler2001,600
OAI-SearchBotOpenAI · busca2001,100
CCBotCommon Crawl · corpus de treinamento1501,000
Meta-ExternalAgentMeta · treinamento1501,000
AmazonbotAmazon150800
PerplexityBotPerplexity · busca80500
Google-ExtendedGoogle · token de treinamento/grounding do Gemini80450
Claude-SearchBotAnthropic · busca50250
ChatGPT-UserOpenAI · acesso acionado pelo usuário40150
DuckAssistBotDuckDuckGo · respostas30150
Applebot-ExtendedApple · token de treinamento30100
anthropic-aiAnthropic · token legado1080
Claude-UserAnthropic · acesso acionado pelo usuário1020
Perplexity-UserPerplexity · acesso acionado pelo usuário1020

O problema do ClaudeBot

“claudebot” tem 4.700 buscas por mês nos EUA e 14.000 no mundo, o que o tornaria de longe o crawler mais pesquisado. Deixamos o termo fora da tabela porque a Ahrefs o classifica sob o tópico principal “claude” — boa parte dessas buscas quase certamente é de gente procurando o chatbot Claude, não o crawler da Anthropic. Trate esse número como um limite superior, não como uma conclusão.

Por que essa diferença importa

Bloquear um crawler de treinamento como o GPTBot mantém suas páginas fora do treinamento de modelos futuros; isso não tira você das respostas de busca ao vivo do ChatGPT. Os crawlers que de fato controlam a citação ao vivo — OAI-SearchBot, Claude-SearchBot, PerplexityBot — recebem uma fração da atenção. O risco é o dono de site que lê sobre o GPTBot, escreve um bloqueio amplo e desliga junto os crawlers de busca. Nosso guia sobre crawlers de IA e robots.txt lista o que cada operador diz que muda ao bloquear o seu bot, com links para a documentação deles, e nosso verificador de crawlers de IA gratuito mostra quais deles o seu robots.txt permite hoje.

As buscas sobre bloqueio são pequenas: “block ai crawlers” tem cerca de 70 buscas por mês nos EUA e “block gptbot”, cerca de 40. A maioria das pessoas que pesquisa o nome de um bot parece querer saber o que ele é antes de decidir.

Método e limites

Os volumes de busca são estimativas do Ahrefs Keywords Explorer para a média de buscas mensais, coletadas em 25 de outubro de 2026 pelo nosso conector SiteWide. São estimativas modeladas, não contagens do próprio Google, e a Ahrefs as arredonda. KD é a dificuldade de palavra-chave da Ahrefs (0–100). CPC é a estimativa da Ahrefs do que os anunciantes pagam por clique nos EUA. Os rótulos de função resumem o que cada operador documenta; veja o guia indicado para as fontes. O interesse de busca mede curiosidade, não volume de rastreamento nem tráfego — um bot pode rastrear muito e ser pouco pesquisado.

Cite este conteúdo

Você pode citar e usar esses números em gráficos, com um link de volta. Citação sugerida: Mentioned, “Quais crawlers de IA os donos de sites pesquisam? Dados de busca de 16 bots,” 25 de outubro de 2026, https://mentioned.at/learn/ai-crawler-search-demand. Os dados e o texto são publicados sob CC BY 4.0.

Faça uma verificação grátis