تعديل ملف robots.txt
لتعديل القواعد في ملف robots.txt الحالي، نزِّل نسخة من ملف robots.txt الخاص بموقعك الإلكتروني وأجرِ التعديلات اللازمة.
تنزيل ملف robots.txt
يمكنك تنزيل ملف robots.txt بطرق مختلفة، على سبيل المثال:
-
انتقِل إلى ملف robots.txt، على سبيل المثال
https://example.com/robots.txt
، وانسخ محتواه إلى ملف نصي جديد على جهاز الكمبيوتر. تأكَّد من اتّباع الإرشادات ذات الصلة بتنسيق الملف عند إنشاء ملف محلي جديد. -
يمكنك تنزيل نسخة من ملف robots.txt باستخدام أداة مثل cURL. على سبيل المثال:
curl https://example.com/robots.txt -o robots.txt
- استخدِم تقرير ملفات robots.txt في Search Console لنسخ محتوى ملف robots.txt، ويمكنك بعدها لصق هذا المحتوى في ملف على الكمبيوتر.
تعديل ملف robots.txt
افتح ملف robots.txt الذي نزّلته من موقعك الإلكتروني في محرِّر نصوص وأدخِل التعديلات اللازمة على القواعد. احرص على استخدام البنية الصحيحة وعلى حفظ الملف بترميز UTF-8.
تحميل ملف robots.txt
حمِّل ملف robots.txt الجديد إلى الدليل الجذري الخاص بموقعك الإلكتروني كملف نصي اسمه robots.txt. والطريقة التي تحمّل بها ملفًا على موقعك الإلكتروني تعتمد بشكل كبير على النظام الأساسي والخادم. راجِع نصائحنا للحصول على مساعدة بشأن تحميل ملف robots.txt إلى موقعك الإلكتروني.
إعادة تحميل ذاكرة التخزين المؤقت لملف robots.txt في Google
أثناء عملية الزحف التلقائي، تلاحظ برامج زحف Google التغييرات التي أجريتها على ملف robots.txt وتعدّل النسخة المخزَّنة مؤقتًا كل 24 ساعة. إذا أردت تعديل ذاكرة التخزين المؤقت بشكل أسرع، استخدِم الوظيفة طلب إعادة زحف في تقرير ملفات robots.txt.