خفض معدّل زحف Googlebot

تتوفّر لدى Google خوارزميات متقدّمة يمكنها تحديد معدّل الزحف المثالي لكل موقع إلكتروني. وهدفنا هو الزحف إلى أكبر عدد ممكن من صفحات موقعك الإلكتروني عند كل زيارة بدون المبالغة في استهلاك معدّل نقل بيانات الخادم. في بعض الحالات، قد يتسبب زحف Google إلى موقعك الإلكتروني بزيادة حرجة في الحمل على البنية الأساسية أو قد يؤدي إلى تكاليف غير مرغوب فيها أثناء حدوث انقطاع في الخدمة. للحدّ من هذه المشاكل، قد تقرّر تقليل عدد الطلبات المقدّمة من Googlebot.

إذا قرّرت خفض معدّل زحف Googlebot، إليك بعض الخيارات:

خفض معدّل الزحف باستخدام Search Console (خيار ننصح به)

لخفض معدّل الزحف سريعًا، يمكنك تغيير معدّل زحف Googlebot في Search Console. بشكل عام، يستغرق ظهور التغييرات التي يتم إجراؤها على هذه الإعدادات بضعة أيام. لاستخدام هذه الإعدادات، عليك أولاً إثبات ملكية موقعك الإلكتروني. احرص على تجنُّب ضبط معدّل الزحف على قيمة منخفضة جدًا تقلّ عن تلك التي يحتاجها موقعك الإلكتروني. اطّلِع على مزيد من المعلومات حول ما تعنيه ميزانية الزحف بالنسبة إلى Googlebot.

إذا كانت إعدادات معدّل الزحف غير متوفّرة لموقعك الإلكتروني، يمكنك تقديم طلب خاص يقضي بخفض معدّل الزحف. ولا يمكنك طلب زيادة معدّل الزحف.

السماح لمحرّك بحث Google بخفض معدّل الزحف تلقائيًا

إذا أردت خفض معدّل الزحف بشكل عاجل لفترة زمنية قصيرة (على سبيل المثال، لمدة ساعتين أو ليوم أو يومين)، اعرض صفحة خطأ تتضمّن معلومات مع رمز الاستجابة 500 أو 503 أو 429 لحالة HTTP بدلاً من عرض كل المحتوى. يخفّض برنامج Googlebot معدّل الزحف إلى موقعك الإلكتروني عندما يرصد عددًا كبيرًا من عناوين URL برموز الاستجابة 500 أو 503 أو 429 لحالة HTTP (على سبيل المثال، إذا أوقفت موقعك الإلكتروني). ويظهر هذا التغيير في عملية الزحف إلى عناوين URL التي تعرض هذه الأخطاء وفي الموقع الإلكتروني بشكل عام. بعد تقليص عدد هذه الأخطاء، سيبدأ معدّل الزحف في الارتفاع تلقائيًا من جديد.