Reduzir a taxa de rastreamento do Googlebot
O Google tem algoritmos sofisticados para determinar a taxa de rastreamento ideal para um site. Nosso objetivo é rastrear o maior número possível de páginas no seu site a cada visita, sem sobrecarregar a largura de banda do servidor. Em alguns casos, o rastreamento que o Google faz do seu site pode causar uma carga crítica na infraestrutura ou custos indesejados durante uma interrupção. Para atenuar esse problema, você pode reduzir o número de solicitações feitas pelo Googlebot.
Se você decidir reduzir a taxa de rastreamento do Googlebot, veja algumas opções:
- Reduzir a taxa de rastreamento com o Search Console (recomendado)
- Permitir que o Google reduza automaticamente a taxa de rastreamento
Reduzir a taxa de rastreamento com o Search Console (recomendado)
Você pode alterar a taxa de rastreamento do Googlebot no Search Console para reduzi-la rapidamente. Em geral, as mudanças feitas nessa configuração são refletidas em alguns dias. Para usar essa configuração, primeiro verifique a propriedade do seu site. Não defina a taxa de rastreamento com um valor muito baixo para as necessidades do seu site. Saiba mais sobre o que significa a cota de rastreamento para o Googlebot.
Se as configurações da taxa de rastreamento não estiverem disponíveis para seu site, envie uma solicitação especial para reduzir a taxa. Não é possível solicitar um aumento na taxa de rastreamento.
Permitir que o Google reduza automaticamente a taxa de rastreamento
Se você precisar reduzir com urgência a taxa de rastreamento por um curto período (por exemplo, algumas horas ou 1 a 2 dias), retorne uma página de erro informativa com um código de status de resposta HTTP 500, 503 ou 429 em vez de todo o conteúdo.
O Googlebot reduz a taxa de rastreamento do site quando encontra um número significativo de URLs com códigos de status de resposta HTTP 500, 503 ou 429 (por exemplo, se você tiver desativado o site).
A mudança é refletida no rastreamento dos URLs que retornam esses erros e no site em geral. Quando o número desses erros for reduzido, a taxa de rastreamento vai começar a aumentar automaticamente.