Crawl budget: o que é, como verificar e como acabar com o desperdício
Crawl budget (orçamento de rastreamento) é quantas URLs o Googlebot consegue e quer buscar no seu site. A maioria dos sites nunca precisa pensar nisso. Sites grandes ou que mudam rápido precisam, e a solução costuma ser a mesma: impedir que o Googlebot gaste tempo com URLs que não importam.
O que é crawl budget?
O Google define crawl budget como o conjunto de URLs que o Googlebot consegue e quer rastrear em um site. No seu guia de gerenciamento do crawl budget, ele divide isso em duas partes:
- Limite de capacidade de rastreamento. Quanto o Googlebot consegue buscar sem sobrecarregar o servidor. Se o site responde rápido, o limite sobe. Se fica lento ou retorna erros de servidor, o Googlebot recua.
- Demanda de rastreamento. Quanto o Google quer rastrear. URLs populares e URLs que mudam são mais rastreadas. URLs desatualizadas ou de pouco valor são menos rastreadas.
Juntando tudo, crawl budget em SEO é o ponto de encontro entre o que o seu servidor aguenta e o que o Google acha que vale a pena buscar. Não dá para comprar mais. Dá para aproveitar melhor o que você recebe.
O crawl budget importa para o seu site?
O Google diz que o crawl budget preocupa principalmente três tipos de site. Segundo o seu guia de crawl budget:
| Site | Páginas únicas | Mudanças de conteúdo | Uma preocupação |
|---|---|---|---|
| Grande | 1.000.000+ | Semanais | ✓ |
| Médio ou maior | 10.000+ | Diárias | ✓ |
| Muitas páginas Descobertas, não indexadas | Quantos quiser | Quantos quiser | ✓ |
| A maioria dos outros sites | Alguns milhares | Quantos quiser | – |
Se as páginas novas são rastreadas em um ou dois dias, o crawl budget não é o seu problema. Olhe a qualidade do conteúdo, os links internos e a indexabilidade. O guia Discovered, currently not indexed do SEO ProCheck explica esse status e as suas causas.
Os hábitos que economizam crawl budget, como URLs limpas, poucos redirecionamentos e nenhuma armadilha de crawl, ajudam qualquer site. Eles também deixam os seus próprios crawls mais rápidos e as auditorias mais fáceis de ler.
Como verificar o crawl budget
Não existe um único número de crawl budget. Você o lê em três lugares.
1. O relatório de Estatísticas de rastreamento no Search Console
Abra Configurações e depois Estatísticas de rastreamento. Você vê o total de solicitações de rastreamento, o tamanho total de download e o tempo médio de resposta dos últimos 90 dias, divididos por código de resposta, tipo de arquivo, finalidade (descoberta ou atualização) e tipo de Googlebot. O status do host mostra se houve problemas na busca do robots.txt, no DNS ou na conectividade do servidor.
O que procurar: uma fatia crescente de respostas 3xx e 4xx, um tempo de resposta que sobe, ou a maioria das solicitações indo para atualização enquanto as páginas novas esperam.
2. Os logs do seu servidor
As Estatísticas de rastreamento são um resumo. Os logs mostram cada requisição, então você vê exatamente quais URLs o Googlebot busca, com que frequência e quais ele nunca toca. Importar em vez de conectar lista os formatos de log que a Neova lê e onde cada hospedagem os guarda.
3. Um crawl seu
Um crawler mostra as URLs que os seus links e sitemaps expõem. Compare essa contagem com o número de páginas que você realmente quer indexadas. Fizemos isso no nosso próprio site:
| seoprocheck.com, 17 de out. de 2026 | URLs |
|---|---|
| Buscadas pelo crawl completo | 10.222 |
| Páginas HTML respondendo 200 | 4.561 |
| Listadas nos XML Sitemaps | 1.835 |
| Alcançadas por links, fora de qualquer sitemap | 2.727 |
Ou seja, menos da metade das URLs buscadas eram páginas HTML que responderam 200; o resto eram arquivos, redirecionamentos e outras respostas em que um bot também gasta requisições. E 2.727 URLs linkadas não estão em nenhum sitemap, o que vale uma olhada antes de culpar o Google. Se um site com 20.000 produtos gera 400.000 URLs rastreáveis, você encontrou o seu desperdício de crawl budget.
De onde vem o desperdício de crawl budget
| Fonte | Como aparece | Correção usual |
|---|---|---|
| Navegação facetada | Uma URL por combinação de filtros | Bloqueie combinações de pouco valor |
| Parâmetros | Rastreamento, sessão, ordenação | Remova dos links internos |
| Armadilhas de crawl | Calendários, pastas que se repetem | Limite, bloqueie ou corrija os links |
| Cadeias de redirecionamento | 2 saltos ou mais | Linke para a URL final |
| Soft 404 | Não encontrada, responde 200 | Retorne 404 ou 410 |
| URLs duplicadas | Maiúsculas, barra, ordem dos parâmetros | Redirecione para uma versão |
| Sitemaps sujos | Redirecionamentos, noindex, erros | Só URLs 200 indexáveis |
| Respostas lentas | Tempo de resposta subindo | Acelere o servidor |
A navegação facetada é a maior fonte na maioria das lojas; o explicativo de crawl budget do SEO ProCheck mostra quando cada fonte importa.
Otimização do crawl budget, passo a passo
- Conte o que deve ser indexado. Anote quantas páginas você quer no Google. Tudo acima disso é candidato a desperdício.
- Rastreie o site e classifique as URLs. Separe as URLs de página limpas das variantes com parâmetros, URLs malformadas, armadilhas de crawl e recursos.
- Encontre os padrões. O desperdício raramente é aleatório. É um filtro, um calendário, um link relativo quebrado repetido milhares de vezes.
- Bloqueie o que nunca precisa ser rastreado. Use o robots.txt para padrões de URL sem valor de busca, como resultados de busca interna ou ordenações. Teste a regra nas URLs rastreadas antes de publicá-la.
- Corrija os links que criam o desperdício. Bloquear esconde as URLs; corrigir os links impede que elas sejam criadas.
- Limpe os XML Sitemaps. Só URLs indexáveis que respondem 200, com datas de lastmod que mudam quando a página muda.
- Retorne os códigos de status certos. 404 ou 410 para páginas que não existem mais, não 200 com uma mensagem de não encontrado.
- Encurte as cadeias de redirecionamento e atualize os links internos para apontar para as URLs finais.
- Acompanhe os logs e as Estatísticas de rastreamento por algumas semanas para confirmar que o Googlebot passa para as páginas que importam.
O que não fazer
Algumas dicas comuns de crawl budget não funcionam como as pessoas esperam. Segundo o guia de crawl budget do Google e a sua página sobre como reduzir a taxa de rastreamento:
| Dica | Economiza budget | Por quê |
|---|---|---|
| Adicionar noindex | – | A página continua sendo buscada |
| Bloquear páginas por um tempo | – | O Google desaconselha |
| Crawl-delay no robots.txt | – | O Googlebot ignora |
| Retornar 503 ou 429 | ◐ | Emergências, 1 a 2 dias |
| Listar URLs em um sitemap | ◐ | Uma sugestão, não uma ordem |
| Bloquear no robots.txt de vez | ✓ | A URL nunca é buscada |
O noindex ajuda na indexação, não no rastreamento. Bloqueie no robots.txt só as URLs que você nunca quer rastreadas e corrija os links que as criam.
Como a Neova ajuda com o crawl budget
A Neova é um crawler, não o Googlebot, então não consegue mostrar o budget do próprio Google. O que ela mostra é onde o seu site dá trabalho extra ao Googlebot:
- Descoberta roda junto com o crawl. A cada minuto, ela diz de onde vêm as novas URLs por padrão e sinaliza formatos de armadilha de crawl, como calendários, pastas que se repetem, IDs de sessão, muitos parâmetros e URLs muito profundas, com Continuar rastreando, Pular ou Excluir na hora.
- Detalhamento das URLs coloca cada URL em um grupo: URLs de página limpas, variantes com parâmetros, URLs malformadas, armadilhas de crawl e recursos. A contagem é sempre explicada.
- O Testador de robots.txt explica cada linha, e o teste de rascunho lista as URLs que uma mudança passaria a bloquear ou liberar antes de você publicá-la.
- Log do servidor, no app desktop, lista as páginas HTML que o Googlebot nunca visitou no período do log e as URLs que os bots pedem e que o crawl não conhece.
- Verificações como URLs indexáveis com parâmetros de busca ou filtro, os mesmos parâmetros em outra ordem, frases de soft 404, URLs com redirecionamento nos XML Sitemaps e um intervalo de novo rastreamento do Googlebot que cresceu 50% ou mais.

A Neova também rastreia com educação: 3 URLs por segundo por padrão, reduzindo a velocidade pela metade quando o servidor fica lento ou responde 429 ou 503. Veja os Recursos ou baixe a Neova para experimentar.
Checklist de crawl budget
| Sinal | Saudável | Local |
|---|---|---|
| Tempo de resposta | Estável ou caindo | Estatísticas de rastreamento |
| Fatia de 3xx e 4xx | Sem subir | Estatísticas de rastreamento, logs |
| URLs rastreáveis por páginas desejadas | Perto de 1 para 1 | O seu crawl |
| Armadilhas de crawl | 0 | O seu crawl |
| Saltos de redirecionamento | No máximo 1 | O seu crawl |
| Páginas removidas | 404 ou 410 | O seu crawl |
| Entradas do sitemap | Só 200 indexáveis | O seu crawl |
| URLs por arquivo de sitemap | Máximo de 50.000 | O seu crawl |
| Dias de log lidos | 30 ou mais | Logs do servidor |
| Novas páginas importantes | Visitadas pelo Googlebot | Logs do servidor |
Perguntas
O que é crawl budget em SEO?
É o número de URLs que um buscador consegue e quer rastrear no seu site em um determinado período. O Google o descreve como a combinação de capacidade de rastreamento e demanda de rastreamento.
O crawl budget importa para sites pequenos?
Normalmente não. O Google diz que ele preocupa principalmente sites muito grandes, sites que mudam todo dia e sites com muitas páginas descobertas mas não indexadas. Sites pequenos ganham mais com conteúdo melhor e links internos.
Como aumentar o crawl budget?
Deixe o servidor rápido e estável e dê ao Google motivos para rastrear: páginas que as pessoas linkam e visitam, e conteúdo que muda. Depois pare de desperdiçar o que você tem com parâmetros, redirecionamentos e duplicatas.
O noindex economiza crawl budget?
Não. O Google precisa rastrear a página para ler o noindex. Para manter o Googlebot longe de um padrão de URL de vez, bloqueie-o no robots.txt e corrija os links que o criam.
O Googlebot respeita o crawl-delay?
Não. O Google não tem suporte a crawl-delay no robots.txt. O Bing documenta suporte a ele. A Neova sinaliza um crawl-delay definido para todos os user agents para você decidir se ele ainda é desejado.