Lorsque Googlebot explore votre site web, il cherche à trouver un équilibre entre la découverte rapide de nouveaux contenus et la limitation de la surcharge du serveur. Dans la plupart des cas, Google gère automatiquement et efficacement la vitesse d'exploration. Cependant, pour les sites très volumineux ou disposant d'une capacité serveur limitée, l'activité de Googlebot peut parfois ralentir les performances.
Dans cet article, vous apprendrez quand il est judicieux de réduire le taux d'exploration de Google, comment le faire et ce qu'il faut éviter.
Qu'est-ce que le taux d'exploration ?
Le taux d'exploration fait référence au nombre de requêtes Googlebot Les requêtes sont envoyées à votre site web dans un délai donné. Si votre serveur est performant, il peut gérer davantage de requêtes. Si votre serveur est limité ou temporairement surchargé, un nombre excessif de requêtes peut ralentir votre site.
Quand faut-il réduire le taux d’exploration de Google ?
Vous ne devez réduire la vitesse d'exploration que si :
-
Googlebot envoie trop de requêtes et surcharge votre serveur
-
La vitesse de votre site ralentit considérablement pendant l'activité de Googlebot
-
Vous remarquez des pics inhabituels d'activité d'exploration dans les journaux de votre serveur
Réduire le taux d'exploration ne doit pas être votre première étape. Vérifiez toujours les performances et les journaux du serveur avant d'apporter des modifications.
Comment réduire le taux d'exploration
1. Utilisez les paramètres de la Search Console de Google
-
Connectez-vous à Google Search Console
-
Allez dans Paramètres > Taux d'exploration
-
Si vous êtes éligible, vous verrez une option pour limiter l'activité d'exploration
-
Déplacez le curseur pour réduire la vitesse d'exploration
Cette option ne s'affiche pas sur tous les sites. Pour la plupart, Google gère l'exploration automatiquement.
2. Ajuster les paramètres du serveur
Si la Search Console ne propose pas l'option de taux d'exploration, vous pouvez utiliser les paramètres du serveur pour limiter le nombre de requêtes autorisées simultanément. Contactez votre développeur ou votre hébergeur pour cela.
3. Solutions temporaires
Si votre site est fortement sollicité (par exemple, lors du lancement d'un produit), vous pouvez utiliser la limitation du serveur pour gérer le trafic. Cependant, autorisez toujours Googlebot à revenir lorsque les performances se stabilisent.
Ce qu'il ne faut pas faire
-
Ne bloquez pas Googlebot in robots.txt:Le bloquer peut supprimer vos pages des résultats de recherche.
-
Ne restreignez pas trop l’exploration : Cela peut entraîner des retards dans l’indexation et les mises à jour.
-
Ne confondez pas le taux d’exploration avec le budget d’exploration : Budget d'exploration Il s'agit du nombre de pages que Google décide d'explorer. La vitesse d'exploration ne concerne que la rapidité avec laquelle ces requêtes sont effectuées.
