Kini, kami hadir di LinkedIn: Untuk mendapatkan berita dan referensi dari Google Penelusuran tentang cara membuat situs Anda dapat ditemukan, ikuti kami di LinkedIn.
Tetap teratur dengan koleksi
Simpan dan kategorikan konten berdasarkan preferensi Anda.
Memperbarui file robots.txt
Untuk memperbarui aturan di file robots.txt yang sudah ada, download salinan file robots.txt
dari situs Anda dan lakukan pengeditan yang diperlukan.
Mendownload file robots.txt
Anda dapat mendownload file robots.txt melalui berbagai cara, misalnya:
Buka file robots.txt, misalnya https://example.com/robots.txt,
lalu salin isinya untuk ditempelkan ke file teks baru di komputer. Pastikan Anda mengikuti panduan
terkait
format file
saat membuat file lokal baru.
Download salinan asli file robots.txt dengan alat seperti cURL. Contoh:
curl https://example.com/robots.txt -o robots.txt
Gunakan
laporan robots.txt
di Search Console untuk menyalin isi file robots.txt, yang kemudian dapat Anda tempel ke
file di komputer.
Mengedit file robots.txt
Di editor teks, buka file robots.txt yang sudah Anda download dari situs, dan lakukan pengeditan yang
diperlukan pada aturan. Pastikan Anda menggunakan
sintaksis yang tepat
dan juga menyimpan file dengan encoding UTF-8.
Mengupload file robots.txt
Upload file robots.txt baru ke direktori root situs Anda sebagai file teks yang bernama
robots.txt. Cara Anda mengupload file ke situs Anda sangat bergantung pada server dan platform. Baca
tips dari kami untuk mendapatkan bantuan terkait cara
mengupload file robots.txt ke situs.
Memuat ulang cache robots.txt Google
Selama proses crawling otomatis, Crawler Google mengetahui perubahan yang Anda buat pada file
robots.txt dan memperbarui versi yang di-cache setiap 24 jam. Jika Anda perlu memperbarui
cache lebih cepat, gunakan fungsi Minta crawl ulang pada
laporan robots.txt.
[[["Mudah dipahami","easyToUnderstand","thumb-up"],["Memecahkan masalah saya","solvedMyProblem","thumb-up"],["Lainnya","otherUp","thumb-up"]],[["Informasi yang saya butuhkan tidak ada","missingTheInformationINeed","thumb-down"],["Terlalu rumit/langkahnya terlalu banyak","tooComplicatedTooManySteps","thumb-down"],["Sudah usang","outOfDate","thumb-down"],["Masalah terjemahan","translationIssue","thumb-down"],["Masalah kode / contoh","samplesCodeIssue","thumb-down"],["Lainnya","otherDown","thumb-down"]],["Terakhir diperbarui pada 2025-02-17 UTC."],[[["The robots.txt file controls which parts of your website search engines can crawl and index."],["You can edit your robots.txt file by downloading it, making changes, and uploading it back to your website's root directory."],["Website hosting services may offer alternative ways to manage search engine crawling, such as through their settings pages."],["Google automatically updates its cached version of your robots.txt file, but you can request a faster refresh using Search Console."]]],["To modify your `robots.txt` file, first download a copy using methods like direct access, cURL, or the Search Console report. Then, edit the file in a text editor, ensuring correct syntax and UTF-8 encoding. Upload the updated file to your site's root directory, typically named `robots.txt`. If direct uploading is not possible, contact your domain manager. Google automatically updates its cached version every 24 hours, or you can use the robots.txt report to request faster recrawling.\n"]]
