خفض معدّل زحف Googlebot

تتوفّر لدى Google خوارزميات متقدّمة يمكنها تحديد معدّل الزحف المثالي لكل موقع إلكتروني. وهدفنا هو الزحف إلى أكبر عدد ممكن من صفحات موقعك الإلكتروني عند كل زيارة بدون المبالغة في استهلاك معدّل نقل بيانات الخادم. في بعض الحالات، قد يتسبب زحف محرّك بحث Google إلى موقعك الإلكتروني بزيادة حرجة في الحمل على البنية الأساسية أو قد يؤدي إلى تكاليف غير مرغوب فيها خلال فترة انقطاع الخدمة. للحدّ من هذه المشاكل، يمكنك تقليل عدد الطلبات المقدّمة من Googlebot.

إذا أردت خفض معدّل الزحف بشكل عاجل لفترة زمنية قصيرة (على سبيل المثال، لمدة ساعتين أو ليوم أو يومَين)، اعرض رمز الاستجابة 500 أو 503 أو 429 لحالة HTTP بدلاً من 200 لطلبات الزحف. يخفّض برنامج Googlebot معدّل الزحف إلى موقعك الإلكتروني عندما يرصد عددًا كبيرًا من عناوين URL برموز الاستجابة 500 أو 503 أو 429 لحالة HTTP (على سبيل المثال، إذا أوقفت موقعك الإلكتروني). ويؤثر معدّل الزخف المخفّض في اسم المضيف الكامل لموقعك الإلكتروني (على سبيل المثال، subdomain.example.com) وفي كلّ من عملية الزحف إلى عناوين URL التي تعرض أخطاءً، وعناوين URL التي تعرض محتوًى. بعد تقليص عدد هذه الأخطاء، سيبدأ معدّل الزحف في الارتفاع تلقائيًا من جديد.

تذكَّر أنّ زيادة حادة في عمليات الزحف قد تكون ناتجة عن أخطاء في بنية موقعك الإلكتروني أو مشاكل في مكان آخر في الموقع. يمكنك الاطّلاع على دليلنا حول تحسين كفاءة الزحف.

إذا لم تكُن بنيتك الأساسية قادرة على عرض أخطاء إلى Googlebot، يمكنك تقديم طلب خاص لخفض معدّل الزحف. ولا يمكنك طلب زيادة معدّل الزحف.