Reduce la frecuencia de rastreo de Googlebot

Google cuenta con algoritmos sofisticados para determinar la velocidad de rastreo óptima de un sitio. Nuestro objetivo es rastrear todas las páginas posibles de tu sitio en cada visita sin superar el límite del ancho de banda del servidor. Es posible que, en algunos casos, el rastreo que hace Google en tu sitio cause una carga crítica en la infraestructura o que genere costos no deseados durante una interrupción. Para solucionar este problema, puedes reducir la cantidad de solicitudes que realiza Googlebot.

Si decides reducir la frecuencia de rastreo de Googlebot, estas opciones podrían resultarte útiles:

Reduce la frecuencia de rastreo con Search Console (recomendado)

Para reducir la frecuencia de rastreo rápidamente, puedes modificarla en Search Console. Por lo general, los cambios que realices en esta configuración se reflejarán en pocos días. Para usarla, primero debes verificar la propiedad de tu sitio. Asegúrate de no establecer la frecuencia de rastreo en un valor demasiado bajo para las necesidades de su sitio. Obtén más información sobre el presupuesto de rastreo de Googlebot.

Permite que Google reduzca la frecuencia de rastreo automáticamente

Si necesitas reducir la frecuencia de rastreo de forma urgente por poco tiempo (por ejemplo, un par de horas o durante 1 o 2 días), muestra una página de error informativa con un código de resultado HTTP 500, 503 o 429 en lugar de todo el contenido. Googlebot reduce la frecuencia de rastreo de tu sitio cuando encuentra una cantidad significativa de URL con códigos de resultado HTTP 500, 503 o 429 (por ejemplo, si inhabilitaste el sitio web). Se reflejará el cambio en el rastreo de las URL que muestran estos errores y en el sitio web en general. Una vez que se reduzca la cantidad de errores, la frecuencia de rastreo comenzará a aumentar automáticamente.