Pourquoi les récupérateurs déclenchés par l'utilisateur sont importants
Parfois, les robots d'exploration d'un moteur de recherche n'accèdent pas automatiquement à votre site web. Ils sont déclenchés par une action de votre part ou d'un autre utilisateur. On les appelle « explorations ». récupérateurs déclenchés par l'utilisateurIls n'explorent pas votre site pour l'indexer comme un Googlebot classique ; au lieu de cela, ils récupèrent des pages spécifiques pour vous aider dans des tâches telles que les tests, la vérification ou les aperçus.
Les récupérateurs déclenchés par l'utilisateur sont importants car ils permettent aux propriétaires de sites et aux référenceurs de :
- Tester la façon dont Google voit une page (sans attendre un crawl programmé).
- Vérifier la propriété du site dans des outils comme Search Console.
- Vérifiez si les données structurées fonctionnent.
- Aperçu de l'apparence du contenu dans les services Google.
Les récupérateurs déclenchés par l'utilisateur de Google
Voici les principaux récupérateurs que vous pouvez rencontrer :
Vérification du site Google
Ce récupérateur est utilisé lorsque vous vérifiez la propriété du site dans Google Search ConsoleIl s'agit d'un récupérateur unique qui n'apparaît que lorsque vous le demandez.
Outil d'inspection Google
Ce récupérateur s'exécute lorsque vous utilisez des outils tels que l'outil d'inspection d'URL, Test de résultats riches, ou test d'optimisation mobile. Il récupère une page à la demande pour vérifier son état.
Robot d'exploration AMP
Ce récupérateur permet de valider et de prévisualiser vos pages AMP. Il garantit leur bon fonctionnement et leur préparation à l'indexation par les moteurs de recherche.
navigation sécurisée
Cet outil de récupération récupère les URL pour vérifier la sécurité du contenu. Il s'agit d'un outil de récupération de sécurité qui contribue à la sécurité d'Internet pour tous.
AdsBot
Ce récupérateur vérifie la qualité des pages de destination pour Google Ads. Il garantit que vos pages de destination fonctionnent correctement et sont pertinentes pour vos annonces.
Principales choses à savoir
- Ces récupérateurs n'explorent pas pour l'indexation : ils n'apparaissent que lorsque vous utilisez un outil Google ou demandez une vérification.
- Il s'agit de robots d'exploration à la demande, déclenchés par des actions spécifiques de l'utilisateur.
- Les bloquer
robots.txtpourrait perturber des services Google importants (comme la vérification du site ou la vérification des publicités). - Ils n'affectent pas votre budget d'exploration car ils ne font pas partie de l'exploration régulière.
Si vous souhaitez en savoir plus sur les robots qui indexent votre contenu, consultez notre Liste des robots d'exploration courants de Google
Comment vérifier un récupérateur déclenché par l'utilisateur
Tout comme avec les autres robots d'exploration Google, vous pouvez confirmer leur authenticité en vérifiant leur IP :
Étape 1 : Trouver l’adresse IP du robot d’exploration
Regardez l’adresse IP dans les journaux de votre serveur.
Étape 2 : Effectuer une recherche DNS inversée
Effectuez une recherche DNS inversée sur cette adresse IP. Le résultat devrait pointer vers un domaine se terminant par googlebot.com or google.com.
Étape 3 : Confirmer avec une recherche DNS directe
Prenez ce nom de domaine et vérifiez s'il correspond à la même adresse IP. Si cela correspond, le robot est un véritable robot Google.