Un fichier serveur qui enregistre chaque requête effectuée sur un site, y compris les robots des moteurs de recherche.
Pourquoi un fichier journal est important
Les fichiers journaux sont essentiels car ils fournissent des données directes et de première main sur l'activité d'un site Web. capacité d'exploration et la santé technique. Si des outils comme Google Search Console offrent une perspective précieuse, ils ne fournissent qu'un échantillon de l'activité de Googlebot. Les fichiers journaux vous offrent une vue d'ensemble de tous les robots d'exploration en temps réel. Leur analyse vous permet :
- Vérifier le comportement d'exploration : Voyez exactement quelles pages les robots des moteurs de recherche visitent et à quelle fréquence.
- Optimiser le budget d'exploration : Identifiez les endroits où les robots perdent du temps sur les pages à faible valeur ajoutée afin de pouvoir rediriger leur attention vers votre contenu le plus important.
- Découvrez les problèmes cachés : Rechercher les erreurs côté serveur, Liens brisés, des pages à chargement lent et des chaînes de redirection qui peuvent être invisibles dans d'autres outils.
- Découvrez les pages orphelines : Identifiez les pages qui n’ont pas de liens internes mais qui sont toujours explorées par des robots.
Ces données sont précieuses pour prendre des décisions stratégiques qui peuvent améliorer la visibilité et les performances de votre site Web.
Sur différentes plateformes CMS
L'accès et l'analyse des fichiers journaux est une tâche technique de référencement qui peut être effectuée sur n'importe quel CMS.
WordPress
Pour accéder aux fichiers journaux d'un site WordPress, vous devrez généralement utiliser le cPanel de votre hébergeur ou un client FTP pour télécharger les fichiers depuis votre serveur. Une fois les fichiers récupérés, vous pouvez utiliser un outil d'analyse des fichiers journaux pour filtrer les données afin de les protéger des robots d'indexation des moteurs de recherche.
Shopify
Shopify possède un système plus fermé, et l'accès direct aux fichiers journaux bruts du serveur n'est généralement pas fourni. Vous vous baserez plutôt sur les données de Google Search Console et d'autres outils tiers pour déduire comment les moteurs de recherche interagissent avec votre site.
Wix
Comme pour Shopify, les utilisateurs de Wix n'ont pas d'accès direct aux fichiers journaux du serveur. La plateforme est conçue pour gérer de nombreux problèmes techniques de référencement automatiquement, mais vous devez toujours utiliser Google Search Console pour surveiller les éventuelles erreurs d'exploration.
Webflow
Webflow vous offre un contrôle total sur votre site web, mais l'accès direct aux fichiers journaux bruts peut dépendre de votre configuration d'hébergement. Si votre site Webflow est hébergé sur un serveur personnalisé, vous pouvez accéder directement aux fichiers journaux.
CMS personnalisé
Avec un CMS personnalisé, vous bénéficiez d'un contrôle optimal et pouvez accéder facilement aux fichiers journaux de votre serveur. Le défi réside dans l'analyse de ces données brutes, qui nécessite souvent un outil dédié ou un expert technique en SEO.
Dans différents secteurs d'activité
Les informations obtenues à partir des fichiers journaux sont applicables à tous les secteurs.
E-Commerce
Les sites e-commerce, notamment ceux proposant un grand nombre de produits et une navigation à facettes, gaspillent souvent beaucoup de budget d'exploration. L'analyse des fichiers journaux peut vous aider à identifier et à bloquer ces pages à faible valeur ajoutée afin de garantir l'exploration et l'indexation de vos pages produits les plus importantes.
Entreprises locales
Une entreprise locale peut l'utiliser pour s'assurer que ses pages principales (page d'accueil, services, page de contact) sont explorées régulièrement. Cela peut également vous aider à repérer d'éventuels problèmes. Profil d'entreprise Google cela peut affecter votre classement dans les recherches locales.
Entreprises SaaS
Les entreprises SaaS peuvent l'utiliser pour surveiller l'interaction des moteurs de recherche avec leur blog et leurs pages marketing. Cela peut vous aider à identifier les pages non explorées et à corriger les problèmes qui pourraient les freiner.
Blog
Un blog peut l'utiliser pour voir quels articles sont les plus consultés. Cela peut vous aider à identifier le contenu populaire et à le mettre à jour pour plus de pertinence. Vous pouvez également l'utiliser pour trouver pages orphelines qui ne sont pas explorés.
À faire et à ne pas faire
Fait
- Accédez et téléchargez régulièrement vos fichiers journaux. C'est la seule façon d'obtenir une vue précise à 100 % et non filtrée de la manière dont les moteurs de recherche interagissent avec votre site.
- Utilisez un outil d’analyse de fichiers journaux. Un outil dédié peut vous aider à analyser, filtrer et analyser les données, ce qui est souvent difficile à faire manuellement.
- Filtrez les robots des moteurs de recherche. Cela vous permet de concentrer votre analyse sur la manière dont les moteurs de recherche interagissent avec votre site, plutôt que sur les visiteurs humains.
Ne pas faire
- Ne vous fiez pas uniquement à la Search Console de Google. Bien qu'il s'agisse d'un excellent outil, il ne fournit qu'un échantillon de Googlebot activité et n'affiche pas les robots d'exploration des autres moteurs de recherche.
- N'ignorez pas les données. Un manque d'exploration ou un nombre élevé d'erreurs dans vos fichiers journaux est un signal clair d'un problème qui doit être résolu.
- Ne supprimez pas votre ancien contenu sans vérifier vos fichiers journaux. Vous supprimez peut-être du contenu qui est toujours en cours d’exploration et d’indexation par les moteurs de recherche.
Erreurs courantes à éviter
- Échec du filtrage des robots des moteurs de recherche : C'est une erreur courante. Filtrez les agents utilisateurs comme « Googlebot », « Bingbot » et « YandexBot » pour obtenir une vision claire de la façon dont les moteurs de recherche interagissent avec votre site.
- Échec de la vérification des codes d'état : Les codes d’état tels que « 404 » et « 500 » sont un signal clair d’un problème qui doit être résolu.
- Ne pas surveiller la fréquence d'exploration : Une baisse ou un pic soudain de la fréquence d'exploration peut être le signe d'un problème.
FAQ
En quoi l’analyse des fichiers journaux est-elle différente de celle de Google Search Console ?
L'analyse des fichiers journaux fournit un aperçu brut, non filtré et complet de toute l'activité des robots sur votre site, provenant de tous les moteurs de recherche. Google Search Console offre une vue simplifiée et agrégée de l'activité de Googlebot uniquement.
Comment les fichiers journaux aident-ils à optimiser un budget d'exploration ?
En analysant les fichiers journaux, vous pouvez voir quelles pages sont le plus souvent explorées par les robots des moteurs de recherche. Cela vous permet d'identifier les pages à faible valeur ajoutée qui gaspillent votre temps. budget d'analyse et de rediriger l'attention des moteurs de recherche vers votre contenu le plus important.
Quelles informations peut-on trouver dans un fichier journal ?
Il contient diverses informations, notamment l'adresse IP du demandeur, la date et l'heure de la demande, l'URL de la page consultée, le code de réponse du serveur (par exemple, 200, 404, 500) et l'agent utilisateur (par exemple, Googlebot, Bingbot).
Qu’est-ce qu’une « page orpheline » dans l’analyse des fichiers journaux ?
Une page orpheline est une page à laquelle aucun lien interne ne pointe. L'analyse des fichiers journaux peut vous aider à identifier ces pages, ce qui peut indiquer une structure de site fragmentée.
Les fichiers journaux peuvent-ils aider à la migration d’un site Web ?
Oui. Après la migration d'un site web, les fichiers journaux constituent le meilleur moyen de vérifier que les moteurs de recherche répondent comme prévu. Ils indiquent si les robots découvrent de nouvelles URL, rencontrent des erreurs ou continuent d'explorer des chemins obsolètes.
