User-agent Duplex sur le Web

DuplexWeb-Google est le user-agent compatible avec le service Duplex sur le Web. Voir le jeton et les chaînes complètes de ce user-agent

Fréquence d'exploration et comportement

  • Les services qui utilisent le user-agent DuplexWeb-Google n'effectuent aucun achat ni aucune autre action importante lors de l'exploration de votre site.
  • Les explorations du user-agent DuplexWeb-Google se produisent entre plusieurs fois par jour et plusieurs fois par heure, selon la fonctionnalité entraînée, mais elles sont calculées pour ne pas surcharger votre site ni perturber le trafic.
  • Les explorations du user-agent DuplexWeb-Google ne sont pas utilisées par la recherche Google pour l'indexation. Dès lors, le user-agent DuplexWeb-Google ne reconnaît pas l'instruction noindex.
  • Google Analytics n'enregistre pas les demandes de page effectuées par le user-agent DuplexWeb-Google lors de l'exploration et de l'analyse.

Utiliser des règles robots.txt pour contrôler l'exploration

Vous devez explicitement bloquer le user-agent DuplexWeb-Google à l'aide de la règle Disallow du fichier robots.txt pour l'empêcher d'explorer votre site. La désactivation de l'exploration (entraînement) dans le paramètre de votre propriété Search Console ne suffit pas.

Le user-agent DuplexWeb-Google respecte normalement les règles du fichier robots.txt, à l'exception notable de ce qui suit :

  • Lorsque Duplex sur le Web estactivé à l'aide de la Search Console (comportement par défaut), le user-agent DuplexWeb-Google ignore les règles Disallow dans les groupes de user-agents génériques *.
  • Lorsque Duplex sur le Web est désactivé à l'aide de la Search Console, le user-agent DuplexWeb-Google respecte les règles Disallow dans les groupes de user-agents génériques *. Exemples : 
# Example 1: Block DuplexWeb-Google from crawling your site
User-agent: DuplexWeb-Google
Disallow: /

# Example 2:
# * If Duplex on the web is enabled for this property in Search Console,
#   block all user agents except DuplexWeb-Google.
# * If Duplex on the web is disabled for this property in Search Console,
#   block all user agents including DuplexWeb-Google.
User-agent: *
Disallow: /