Liste des extracteurs Google déclenchés par l'utilisateur

Les extracteurs déclenchés par l'utilisateur permettent d'exécuter une fonction d'extraction dans un produit Google. Par exemple, Google Site Verifier agit à la demande d'un utilisateur, ou un site hébergé sur Google Cloud (GCP) dispose d'une fonctionnalité qui permet à ses utilisateurs de récupérer un flux RSS externe. Étant donné que l'extraction a été demandée par un utilisateur, ces extracteurs ignorent généralement les règles du fichier robots.txt. Les propriétés techniques générales des robots d'exploration Google s'appliquent également aux extracteurs déclenchés par l'utilisateur.

Les plages d'adresses IP utilisées par les extracteurs déclenchés par l'utilisateur sont publiées dans les objets user-triggered-fetchers.json et user-triggered-fetchers-google.json. Le masque DNS inversé des extracteurs déclenchés par l'utilisateur correspond à ***-***-***-***.gae.googleusercontent.com ou google-proxy-***-***-***-***.google.com, selon que l'extracteur appartient à Google ou à l'utilisateur.

La liste suivante présente les extracteurs déclenchés par l'utilisateur, leurs chaînes user-agent telles qu'elles apparaissent dans les requêtes HTTP, ainsi que les produits auxquels ils sont associés. La liste n'est pas exhaustive. Elle ne couvre que les demandeurs qui sont plus susceptibles d'apparaître dans les fichiers journaux et sur lesquels nous avons reçu des questions.

User-agent dans les requêtes HTTP
FeedFetcher-Google; (+http://www.google.com/feedfetcher.html)
Produits associés Feedfetcher est utilisé pour explorer les flux RSS ou Atom pour Google Actualités et PubSubHubbub.
User-agent dans les requêtes HTTP
GoogleProducer; (+https://developers.google.com/search/docs/crawling-indexing/google-producer)
Produits associés Le Google Publisher Center récupère et traite les flux que les éditeurs ont explicitement fournis pour une utilisation sur les pages de destination de Google Actualités.
User-agent dans les requêtes HTTP
Agent mobile
Mozilla/5.0 (Linux; Android 7.0; SM-G930V Build/NRD90M) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/59.0.3071.125 Mobile Safari/537.36 (compatible; Google-Read-Aloud; +https://support.google.com/webmasters/answer/1061943)
Agent pour ordinateur
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2272.118 Safari/537.36 (compatible; Google-Read-Aloud; +https://support.google.com/webmasters/answer/1061943)
Ancien agent (obsolète) google-speakr
Produits associés À la demande de l'utilisateur, Google Read Aloud récupère et lit les pages Web à l'aide de la synthèse vocale.
User-agent dans les requêtes HTTP
Mozilla/5.0 (compatible; Google-Site-Verification/1.0)
Produits associés Google Site Verifier récupère les jetons de validation de la Search Console.