Quelques infos sur Google (et Bing parfois) et son moteur de recherche, glanées ici et là de façon officieuse ces derniers jours, avec au programme cette semaine quelques réponses à ces angoissantes questions : qu'est-ce qui peut expliquer l'apparition d'une erreur noindex detected dans la Google Search Console ? Où en est Google dans l'amélioration du crawling ?
Une erreur noindex detected peut être liée au CDN
Sur Reddit, John Mueller a apporté son point de vue sur les erreurs « noindex detected in X-Robots-Tag HTTP header » signalées dans la Google Search Console pour des pages qui ne disposent pourtant pas de X-Robots-Tag ou de directive liée. L’intéressé a notamment indiqué qu’il avait déjà vu ce problème se produire par le passé dans le contexte des réseaux de diffusion de contenu (CDN), faisant ici référence à la solution Cloudflare utilisée pour le site en question, ou avec de très anciennes URLs.
Source : Search Engine Journal
Taux de fiabilité : ⭐⭐⭐ On est d'accord !
Même si John Mueller n’affirme rien, la piste du CDN est une voie à envisager si vous utilisez un réseau de diffusion de contenu et que vous êtes confronté à cette situation.
Goossip #2
Google continue de travailler à l'amélioration de l’exploration
En avril 2024, Gary Illyes de Google avait exprimé sa volonté de rendre l'exploration du web plus efficace, en cherchant à « réduire la fréquence d'exploration et la quantité de données transférées (…) sans réduire la qualité du crawl ». Récemment, il a déclaré sur LinkedIn que des améliorations avaient été apportées, tout en reconnaissant que « beaucoup reste à faire » dans le domaine.
Source : Search Engine Roundtable
Taux de fiabilité : ⭐⭐⭐ On est d'accord !
Avouons-le : on aurait aimé en savoir un peu plus qu’un laconique « beaucoup reste à faire ». Reste à savoir comment le géant de Mountain View s’y prend pour essayer d’être « plus intelligent en ce qui concerne la mise en cache et le partage du cache interne entre user agents », comme l’avait précisé Gary Illyes il y a bientôt un an sur LinkedIn.
Articles complémentaires :
Goossips SEO : actualités, IA, indexation de nouveaux domaines et localisation du CDN
Goossips SEO : Format audio, YouTube, Exploration
Google met à jour sa documentation sur les robots d’exploration
Goossips SEO : AMP, Crawl, IA, ARIA, Core Web Vitals
Goossips SEO : canonical, negative SEO, indexation
