Reduzir a taxa de rastreamento do Googlebot

O Google tem algoritmos sofisticados para determinar a velocidade de rastreamento ideal para um site. Nosso objetivo é rastrear o maior número possível de páginas no seu site a cada visita, sem sobrecarregar a largura de banda do servidor. Em alguns casos, o rastreamento que o Google faz do seu site pode causar uma carga crítica na infraestrutura ou custos indesejados durante uma interrupção. Para atenuar esse problema, você pode reduzir o número de solicitações feitas pelo Googlebot.

Se você decidir reduzir a taxa de rastreamento do Googlebot, veja algumas opções:

Reduzir a taxa de rastreamento com o Search Console (recomendado)

Você pode alterar a taxa de rastreamento do Googlebot no Search Console para reduzi-la rapidamente. As alterações feitas nessa configuração geralmente são refletidas em alguns dias. Para usar essa configuração, primeiro verifique a propriedade do seu site. Não defina a taxa de rastreamento com um valor muito baixo para as necessidades do seu site. Saiba mais sobre o que significa a cota de rastreamento para o Googlebot.

Permitir que o Google reduza automaticamente a taxa de rastreamento

Se você precisar reduzir com urgência a taxa de rastreamento por um curto período (por exemplo, algumas horas ou um/dois dias), retorne uma página de erro informativa com um código de resultado HTTP 500, 503 ou 429 em vez de todo o conteúdo. O Googlebot reduz a taxa de rastreamento do site quando encontra um número significativo de URLs com códigos de resultado HTTP 500, 503 ou 429 (por exemplo, se você tiver desativado o site). A alteração é refletida no rastreamento dos URLs que retornam esses erros e no site em geral. Quando o número desses erros for reduzido, a taxa de rastreamento começará a aumentar automaticamente.