Intro
Gary Illyes, de Google, a récemment expliqué les raisons des erreurs frustrantes "crawled but not indexed" lors d'une interview à la conférence SERP Conf 2024 en Bulgarie. Ses réflexions ont permis de faire la lumière sur ce problème courant et d'offrir des conseils précieux pour le résoudre.
Points clés :
1. Similitude du contenu:
- Illyes a confirmé que l'une des raisons de cette erreur est la similarité du contenu. Si le contenu d'une page est très proche d'un autre contenu déjà indexé, Google peut décider de ne pas l'indexer.
2. Qualité générale du site:
- La qualité globale d'un site web a un impact significatif sur l'indexation. Un nombre élevé de pages "explorées mais non indexées" peut indiquer des problèmes de qualité du site.
3. Questions techniques:
- Des problèmes techniques, tels que la diffusion du même contenu sur plusieurs URL, peuvent également entraîner cette erreur. La perception du site par Google peut changer si de tels problèmes sont détectés.
4. Duplication:
- Le contenu dupliqué est un autre facteur important. Google peut explorer une page mais décider de ne pas l'indexer si une version similaire avec de meilleurs signaux existe déjà dans son index.
Explication détaillée:
Au cours de l'entretien, M. Illyes a répondu à la question de savoir si l'erreur "crawled but not indexed" pouvait résulter du fait qu'une page était trop similaire à un contenu déjà indexé. Il a confirmé que cela pouvait être l'une des raisons, mais a souligné que plusieurs facteurs contribuaient à ce problème.
Granularité et complexité:
Illyes a souligné la complexité de la catégorisation de ces erreurs en raison de la manière dont les données sont traitées en interne par Google. Il a expliqué que si le contenu dupliqué est un facteur important, il existe de nombreuses autres raisons potentielles à cette erreur.
Questions de qualité:
Illyes a souligné que la qualité générale d'un site peut grandement influencer l'indexation. Une augmentation du nombre de pages "explorées mais non indexées" peut indiquer une baisse de la perception de la qualité du site par Google. Cela peut être dû à diverses raisons, notamment un contenu médiocre ou des erreurs techniques.
Problèmes techniques:
Des problèmes techniques, tels qu'un site web diffusant par erreur le même contenu pour différentes URL, peuvent également être à l'origine de ce problème. De telles erreurs peuvent amener Google à reconsidérer ses décisions d'indexation.
Signaux de site:
Illyes a indiqué que si un autre site présentant de meilleurs signaux héberge le même contenu, Google pourrait préférer indexer ce site à la place. Ce scénario se produit souvent dans le cas de contenus syndiqués où la version originale de l'éditeur n'est pas indexée.
Des enseignements pratiques :
Comprendre ces causes peut aider les webmasters à déboguer et à corriger les erreurs "crawled but not indexed". Les principales mesures à prendre sont les suivantes :
-
Examiner la similitude du contenu: Assurez-vous que votre contenu est unique et qu'il n'est pas trop similaire au contenu indexé existant.
-
Améliorer la qualité du site: Concentrez-vous sur l'amélioration de la qualité générale de votre site afin d'améliorer sa perception par Google.
-
Résoudre les problèmes techniques: Résoudre les problèmes techniques susceptibles d'être à l'origine de contenus dupliqués ou d'autres problèmes.
-
Surveiller les signaux du site: Sachez comment les signaux de votre site se comparent à ceux des autres, en particulier si votre contenu est syndiqué.
En agissant sur ces points, vous augmentez vos chances de voir vos pages indexées par Google.
