Aggiornare il file robots.txt
Per aggiornare le regole nel file robots.txt esistente, scarica una copia del file dal tuo sito e apporta le modifiche necessarie.
Scaricare il file robots.txt
Puoi scaricare il file robots.txt in diversi modi, ad esempio:
-
Vai al tuo file robots.txt, ad esempio
https://example.com/robots.txt
, e copiane i contenuti in un nuovo file di testo sul computer. Quando crei il nuovo file locale, assicurati di seguire le linee guida relative al formato file. -
Scarica una copia effettiva del file robots.txt con uno strumento come cURL. Ad esempio:
curl https://example.com/robots.txt -o robots.txt
-
Utilizza lo strumento Tester dei file robots.txt in Search Console per scaricare una copia del file robots.txt.
- Fai clic su Invia nell'angolo in basso a destra dell'editor robots.txt. Questa azione consente di visualizzare una finestra di dialogo Invia.
- Scarica il codice robots.txt dalla pagina Tester dei file robots.txt facendo clic su Scarica nella finestra di dialogo Invia.
Modificare il file robots.txt
Apri il file robots.txt scaricato dal tuo sito in un editor di testo e apporta le modifiche necessarie alle regole. Assicurati di utilizzare la sintassi corretta e di salvare il file con la codifica UTF-8.
Caricare il file robots.txt
Carica il nuovo file robots.txt nella directory principale del tuo dominio sotto forma di file di testo denominato robots.txt. La modalità di caricamento di un file sul sito dipende molto dalla piattaforma e dal server. Consulta i nostri suggerimenti per ricevere assistenza su come caricare un file robots.txt sul tuo sito.
Aggiornare la cache del file robots.txt di Google
Durante la procedura di scansione automatica, i crawler di Google rilevano le modifiche apportate al file robots.txt e aggiornano la versione memorizzata nella cache ogni 24 ore. Se devi aggiornare più velocemente la cache, utilizza la funzione Invia del Tester dei file robots.txt.
- Fai clic su Visualizza versione caricata per verificare che la versione del file robots.txt pubblicata sia quella che vuoi che venga sottoposta a scansione da Google.
- Fai clic su Invia per informare Google che sono state apportate modifiche al file robots.txt e richiederne la scansione.
- Verifica che la versione più recente sia stata sottoposta correttamente a scansione da Google aggiornando la pagina nel browser per aggiornare l'editor dello strumento e visualizzare il codice del file robots.txt pubblicato. Dopo aver aggiornato la pagina, puoi anche fare clic sul menu a discesa per visualizzare il timestamp relativo alla prima visualizzazione della versione più recente del file robots.txt da parte di Google.