Glossaire · Exploration et indexation
Analyse de logs SEO
On dit aussi Log file analysisAnalyse des fichiers journaux
L’analyse de logs SEO consiste à étudier les fichiers journaux (logs) générés par le serveur web. Ces fichiers contiennent toutes les requêtes faites au serveur, y compris celles des bots de moteurs de recherche comme Googlebot. Elle permet de comprendre comment Google explore un site : quelles pages sont crawlées, à quelle fréquence, et lesquelles sont ignorées.
Points clés
- Montre le comportement réel de Googlebot sur le site
- Identifie les pages non crawlées ou trop sollicitées
- Permet d’optimiser le budget de crawl et la structure du site
Pourquoi c’est important
Google n’explore pas toutes les pages d’un site à chaque passage : il a un budget de crawl limité. L’analyse de logs révèle si ce budget est utilisé efficacement, identifie les pages crawlées inutilement et les pages importantes non visitées. C’est une approche avancée indispensable sur les sites de grande taille ou en e-commerce.
Bonnes pratiques
- Utiliser un outil dédié (Screaming Frog Log Analyzer, Oncrawl, Botify…)
- Comparer les logs avec la structure idéale du site
- Identifier les pages stratégiques ignorées et y rediriger le crawl
- Bloquer le crawl inutile via robots.txt ou noindex
En code
grep "Googlebot" access.log | awk '{print $7}' | sort | uniq -c | sort -rn | head -20Sur un journal d’accès au format Apache ou Nginx habituel, où l’adresse demandée est le 7e champ.
Exemple concret
Une boutique e-commerce avec 50 000 produits découvre que 70 % du crawl est consommé par des pages de filtres inutiles. Grâce aux logs, elle bloque ces filtres via robots.txt et oriente Google vers les fiches produits, augmentant leur visibilité.
Besoin d’un coup de main ?
Développement Un site que Google explore et indexe sans obstacle. Voir la prestationVous hésitez sur la priorité ? Le diagnostic vous remet une solution écrite, à prix fixe et sans engagement.
