Liste des extracteurs Google déclenchés par l'utilisateur

Les extracteurs déclenchés par l'utilisateur permettent d'exécuter une fonction d'extraction dans un produit Google. Par exemple, Google Site Verifier agit à la demande d'un utilisateur, ou un site hébergé sur Google Cloud (GCP) dispose d'une fonctionnalité qui permet à ses utilisateurs de récupérer un flux RSS externe. Étant donné que l'extraction a été demandée par un utilisateur, ces extracteurs ignorent généralement les règles du fichier robots.txt. Les propriétés techniques générales des robots d'exploration Google s'appliquent également aux extracteurs déclenchés par l'utilisateur.

Les plages d'adresses IP utilisées par les extracteurs déclenchés par l'utilisateur sont publiées dans les objets user-triggered-fetchers.json et user-triggered-fetchers-google.json. Le masque DNS inversé des extracteurs déclenchés par l'utilisateur correspond à ***-***-***-***.gae.googleusercontent.com ou google-proxy-***-***-***-***.google.com, selon que l'extracteur appartient à Google ou à l'utilisateur.

La liste suivante présente les extracteurs déclenchés par l'utilisateur, leurs chaînes user-agent telles qu'elles apparaissent dans les requêtes HTTP et les produits auxquels ils sont associés. La liste n'est pas exhaustive. Elle ne couvre que les demandeurs qui sont plus susceptibles d'apparaître dans les fichiers journaux et pour lesquels nous avons reçu des questions.

User-Agent dans les requêtes HTTP

FeedFetcher-Google; (+http://www.google.com/feedfetcher.html)
Produits associés Feedfetcher est utilisé pour explorer les flux RSS ou Atom pour Google Actualités et PubSubHubbub.
User-Agent dans les requêtes HTTP

GoogleProducer; (+https://developers.google.com/search/docs/crawling-indexing/google-producer)
Produits associés Le Google Publisher Center récupère et traite les flux que les éditeurs ont explicitement fournis pour une utilisation sur les pages de destination de Google Actualités.
User-Agent dans les requêtes HTTP
Agent mobile

Mozilla/5.0 (Linux; Android 7.0; SM-G930V Build/NRD90M) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/59.0.3071.125 Mobile Safari/537.36 (compatible; Google-Read-Aloud; +https://support.google.com/webmasters/answer/1061943)
Agent pour ordinateur

Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2272.118 Safari/537.36 (compatible; Google-Read-Aloud; +https://support.google.com/webmasters/answer/1061943)
Ancien agent (obsolète) google-speakr
Produits associés À la demande de l'utilisateur, Google Read Aloud récupère et lit les pages Web à l'aide de la synthèse vocale.
User-Agent dans les requêtes HTTP

Mozilla/5.0 (compatible; Google-Site-Verification/1.0)
Produits associés Google Site Verifier récupère les jetons de validation de la Search Console.