Aggiornare il file robots.txt

Per aggiornare le regole nel file robots.txt esistente, scarica una copia del file dal tuo sito e apporta le modifiche necessarie.

Scaricare il file robots.txt

Puoi scaricare il file robots.txt in diversi modi, ad esempio:

  • Vai al tuo file robots.txt, ad esempio https://example.com/robots.txt, e copiane i contenuti in un nuovo file di testo sul computer. Quando crei il nuovo file locale, assicurati di seguire le linee guida relative al formato file.
  • Scarica una copia effettiva del file robots.txt con uno strumento come cURL. Ad esempio:
    curl https://example.com/robots.txt -o robots.txt
  • Usa il report sul file robots.txt in Search Console per copiare i contenuti del file robots.txt, che in seguito puoi incollare in un file sul computer.

Modificare il file robots.txt

Apri il file robots.txt scaricato dal tuo sito in un editor di testo e apporta le modifiche necessarie alle regole. Assicurati di utilizzare la sintassi corretta e di salvare il file con la codifica UTF-8.

Caricare il file robots.txt

Carica il nuovo file robots.txt nella directory root del tuo sito sotto forma di file di testo denominato robots.txt. La modalità di caricamento di un file sul sito dipende molto dalla piattaforma e dal server. Consulta i nostri suggerimenti per ricevere assistenza su come caricare un file robots.txt sul tuo sito.

Aggiornare la cache del file robots.txt di Google

Durante la procedura di scansione automatica, i crawler di Google rilevano le modifiche apportate al file robots.txt e aggiornano la versione memorizzata nella cache ogni 24 ore. Se devi aggiornare più velocemente la cache, utilizza la funzione Richiedi una nuova scansione del report sul file robots.txt.