अब हमसे LinkedIn पर जुड़ें: अपनी साइट को खोजे जाने लायक बनाने के लिए, Google Search से मिलने वाली खबरें और रिसॉर्स देखें. इसके लिए, हमें LinkedIn पर फ़ॉलो करें.
संग्रह की मदद से व्यवस्थित रहें
अपनी प्राथमिकताओं के आधार पर, कॉन्टेंट को सेव करें और कैटगरी में बांटें.
robots.txt फ़ाइल अपडेट करना
अपनी मौजूदा robots.txt फ़ाइल के नियमों को अपडेट करने के लिए,
अपनी साइट से robots.txt फ़ाइल की कॉपी को डाउनलोड करें. इसके बाद, उसमें ज़रूरी बदलाव करें.
robots.txt फ़ाइल डाउनलोड करना
robots.txt फ़ाइल कई तरीकों से डाउनलोड की जा सकती है. उदाहरण के लिए:
अपनी robots.txt फ़ाइल पर जाएं, जैसे कि https://example.com/robots.txt पर. फिर, इसके कॉन्टेंट को अपने कंप्यूटर पर, नई टेक्स्ट फ़ाइल में कॉपी करें. नई लोकल फ़ाइल बनाते समय, फ़ाइल फ़ॉर्मैट से जुड़े दिशा-निर्देशों का पालन ज़रूर करें.
cURL जैसे टूल की मदद से, अपनी robots.txt फ़ाइल की कॉपी डाउनलोड करें. उदाहरण के लिए:
curl https://example.com/robots.txt -o robots.txt
अपनी robots.txt फ़ाइल के कॉन्टेंट को कॉपी करने के लिए, Search Console में robots.txt रिपोर्ट का इस्तेमाल करें. इसके बाद, इसे अपने कंप्यूटर पर किसी फ़ाइल में चिपकाया जा सकता है.
robots.txt फ़ाइल में बदलाव करना
नियमों में ज़रूरी बदलाव करने के लिए, साइट से डाउनलोड की गई robots txt फ़ाइल को टेक्स्ट एडिटर में खोलें. पक्का करें कि सही सिंटैक्स का इस्तेमाल हो रहा है. फ़ाइल को UTF-8 कोड में बदलकर ही सेव करें.
robots.txt फ़ाइल अपलोड करना
अपनी नई robots.txt फ़ाइल को robots.txt नाम वाली टेक्स्ट फ़ाइल के रूप में, अपनी साइट की रूट डायरेक्ट्री में अपलोड करें. साइट पर फ़ाइल अपलोड करने का तरीका बहुत हद तक आपके प्लैटफ़ॉर्म और सर्वर पर निर्भर करता है. अपनी साइट पर robots.txt फ़ाइल अपलोड करने का तरीका जानें.
Google की robots.txt फ़ाइलों की कैश मेमोरी रीफ़्रेश करना
अपने-आप क्रॉल होने की प्रोसेस के दौरान, Google के क्रॉलर आपकी robots.txt फ़ाइल में किए गए बदलावों को ध्यान में रखते हैं और हर 24 घंटे में कैश मेमोरी में सेव किए गए वर्शन को अपडेट करते रहते हैं. अगर आपको कैश मेमोरी को जल्दी अपडेट करना है, तो robots.txt रिपोर्ट के फिर से क्रॉल करने का अनुरोध करें फ़ंक्शन का इस्तेमाल करें.
[[["समझने में आसान है","easyToUnderstand","thumb-up"],["मेरी समस्या हल हो गई","solvedMyProblem","thumb-up"],["अन्य","otherUp","thumb-up"]],[["वह जानकारी मौजूद नहीं है जो मुझे चाहिए","missingTheInformationINeed","thumb-down"],["बहुत मुश्किल है / बहुत सारे चरण हैं","tooComplicatedTooManySteps","thumb-down"],["पुराना","outOfDate","thumb-down"],["अनुवाद से जुड़ी समस्या","translationIssue","thumb-down"],["सैंपल / कोड से जुड़ी समस्या","samplesCodeIssue","thumb-down"],["अन्य","otherDown","thumb-down"]],["आखिरी बार 2025-02-17 (UTC) को अपडेट किया गया."],[[["The robots.txt file controls which parts of your website search engines can crawl and index."],["You can edit your robots.txt file by downloading it, making changes, and uploading it back to your website's root directory."],["Website hosting services may offer alternative ways to manage search engine crawling, such as through their settings pages."],["Google automatically updates its cached version of your robots.txt file, but you can request a faster refresh using Search Console."]]],["To modify your `robots.txt` file, first download a copy using methods like direct access, cURL, or the Search Console report. Then, edit the file in a text editor, ensuring correct syntax and UTF-8 encoding. Upload the updated file to your site's root directory, typically named `robots.txt`. If direct uploading is not possible, contact your domain manager. Google automatically updates its cached version every 24 hours, or you can use the robots.txt report to request faster recrawling.\n"]]
