Reduce la frecuencia de rastreo de Googlebot

Google cuenta con algoritmos sofisticados para determinar la frecuencia de rastreo óptima de un sitio. Nuestro objetivo es rastrear todas las páginas posibles de tu sitio en cada visita sin superar el límite del ancho de banda de tu servidor. Es posible que, en algunos casos, el rastreo que hace Google en tu sitio cause una carga crítica en la infraestructura o que genere costos no deseados durante una interrupción. Para solucionar este problema, puedes reducir la cantidad de solicitudes que realiza Googlebot.

Si decides reducir la frecuencia de rastreo de Googlebot, estas opciones podrían resultarte útiles:

Reduce la frecuencia de rastreo con Search Console (recomendado)

Para reducir la frecuencia de rastreo de Googlebot rápidamente, puedes modificarla en Search Console. Por lo general, los cambios que realices en este parámetro de configuración se reflejarán en pocos días. Para usarlo, primero debes verificar la propiedad de tu sitio. Asegúrate de no establecer la frecuencia de rastreo en un valor demasiado bajo para las necesidades de su sitio. Obtén más información sobre el presupuesto de rastreo de Googlebot.

Si la Configuración de la frecuencia de rastreo no está disponible para tu sitio, presenta una solicitud especial para reducirla. No puedes solicitar un aumento en la frecuencia de rastreo.

Permite que Google reduzca la frecuencia de rastreo automáticamente

Si necesitas reducir la frecuencia de rastreo de forma urgente por poco tiempo (por ejemplo, un par de horas o durante 1 o 2 días), muestra una página de error informativa con un código de estado de respuesta HTTP 500, 503 o 429, en lugar de todo el contenido. Googlebot reduce la frecuencia de rastreo de tu sitio cuando encuentra una cantidad significativa de URLs con códigos de estado de respuesta HTTP 500, 503 o 429 (por ejemplo, si inhabilitaste el sitio web). Se reflejará el cambio en el rastreo de las URLs que muestran estos errores y en el sitio web en general. Una vez que se reduzca la cantidad de errores, la frecuencia de rastreo comenzará a aumentar automáticamente.