Zmniejszanie szybkości indeksowania przez Googlebota

Google korzysta z zaawansowanych algorytmów określających optymalną szybkość indeksowania witryny. Naszym celem jest zindeksowanie możliwie największej liczby stron w witrynie podczas każdych odwiedzin bez nadmiernego obciążania serwera. W niektórych przypadkach indeksowanie Twojej witryny przez Google może powodować krytyczne obciążenie Twojej infrastruktury lub niepożądane koszty w czasie awarii. Aby przeciwdziałać tym efektom, możesz zmniejszyć liczbę żądań nadsyłanych przez Googlebota.

Jeśli zdecydujesz się zmniejszyć szybkość indeksowania przez Googlebota, możesz to zrobić na 2 sposoby:

Zmniejszanie szybkości indeksowania za pomocą Search Console (zalecane)

Aby w krótkim czasie zmniejszyć szybkość indeksowania przez Googlebota, możesz ją zmienić w Search Console. Zmiana tego ustawienia jest zwykle odczuwalna w ciągu kilku dni. Aby móc z niego skorzystać, najpierw potwierdź swoje prawo własności do witryny. Sprawdź, czy szybkość indeksowania nie jest ustawiona na wartość zbyt niską w stosunku do potrzeb Twojej witryny. Dowiedz się więcej o tym, co oznacza budżet indeksowania w przypadku Googlebota.

Zezwalanie Google na automatyczne zmniejszenie szybkości indeksowania

Jeśli musisz pilnie zmniejszyć szybkość indeksowania na krótki czas (np. na kilka godzin lub 1–2 dni), zamiast całej treści danej strony zwróć informacyjną stronę błędu z kodem wyniku HTTP 500, 503 lub 429. Googlebot zmniejsza szybkość indeksowania witryny, gdy napotka znaczną liczbę adresów URL z kodami wyniku HTTP 500, 503 lub 429 (np. gdy wyłączysz swoją witrynę). Ta zmiana szybkości dotyczy zarówno indeksowania adresów URL, które zwracają te błędy, jak i reszty witryny. Gdy liczba tych błędów spadnie, szybkość indeksowania automatycznie zacznie ponownie rosnąć.