Organízate con las colecciones
Guarda y clasifica el contenido según tus preferencias.
Reducir la frecuencia de rastreo del robot de Google
Mediante sofisticados algoritmos, Google determina cuál es la frecuencia óptima con la que se debe rastrear un sitio. En cada visita, se intentan rastrear tantas páginas de tu sitio como permita el ancho de banda de tu servidor. En algunos casos, el rastreo que hace Google de tu sitio web puede llegar a imponer una carga excesiva en tu infraestructura o generar costes no deseados por una interrupción del servicio. Para solucionar este problema, puedes reducir el número de solicitudes del robot de Google.
Si necesitas reducir urgentemente la frecuencia de rastreo durante un periodo breve (por ejemplo, un par de horas o 1 o 2 días), devuelve un código de respuesta HTTP 500, 503 o 429 en lugar de 200 a las solicitudes de rastreo. El robot de Google reduce la frecuencia de rastreo de tu sitio cuando detecta un número significativo de URLs con códigos de estado de respuesta HTTP 500, 503 o 429; por ejemplo, si has inhabilitado tu sitio web.
La reducción de la frecuencia de rastreo afecta a todo el nombre de host de tu sitio (por ejemplo, subdomain.example.com), tanto al rastreo de las URLs que devuelven errores como al de las URLs que devuelven contenido. Una vez que se haya reducido el número de estos errores, la frecuencia de rastreo empezará a aumentar automáticamente.
Ten en cuenta que, si se produce un aumento considerable del rastreo, puede deberse a deficiencias en la estructura de tu sitio o a problemas con tu sitio. Consulta nuestra guía sobre cómo optimizar la eficiencia del rastreo.
Si no es posible servir errores al robot de Google en tu infraestructura, presenta una solicitud especial para reducir la frecuencia de rastreo. No puedes solicitar un aumento de la frecuencia de rastreo.
[[["Es fácil de entender","easyToUnderstand","thumb-up"],["Me ofreció una solución al problema","solvedMyProblem","thumb-up"],["Otro","otherUp","thumb-up"]],[["Me falta la información que necesito","missingTheInformationINeed","thumb-down"],["Es demasiado complicado o hay demasiados pasos","tooComplicatedTooManySteps","thumb-down"],["Está obsoleto","outOfDate","thumb-down"],["Problema de traducción","translationIssue","thumb-down"],["Problema de muestras o código","samplesCodeIssue","thumb-down"],["Otro","otherDown","thumb-down"]],["Última actualización: 2025-02-17 (UTC)."],[[["Google automatically adjusts crawl rate to avoid overloading your server, but you can reduce it further if needed."],["Temporarily reducing crawl rate can be achieved by returning 500, 503, or 429 HTTP response codes, but this impacts content freshness and discovery."],["For longer-term crawl rate reduction, file a special request with Google; however, increasing the rate isn't possible."],["Before reducing crawl rate, consider optimizing your website structure for better crawling efficiency as this might resolve the issue."],["Extended use of error codes to control crawling may lead to URLs being dropped from Google's index, so it's crucial to use this method cautiously."]]],[]]
