Google a mis à jour ses recommandations sur le budget de crawl, incitant les grands sites à vérifier la présence de tous les liens sur leurs versions mobiles. Cette mise à jour impacte particulièrement les grands sites aux nombreuses pages, dont la visibilité dépend d'une découverte rapide des nouvelles pages par Google.
Ce qu'il faut retenir :
- Google recommande une structure de liens cohérente entre les versions mobile et desktop pour une optimisation du crawl budget.
- Les sites de plus de 10 000 pages ou rencontrant des problèmes d’indexation sont particulièrement concernés.
- Si l'inclusion de tous les liens sur la version mobile est impossible, Google préconise de les intégrer dans le sitemap.
- Vous devez veiller à l'alignement des liens entre vos versions mobile et desktop, ou vous assurer qu'un sitemap complet est en place. Le but est d'améliorer la vitesse de découverte des nouvelles pages et donc la visibilité de vos sites dans les SERP.
Comprendre le crawl budget
Le budget de crawl représente le nombre de pages qu’un moteur de recherche, comme Google, explore et indexe sur un site au cours d’une période donnée. Ce budget influence la rapidité avec laquelle Google découvre et indexe le contenu neuf ou mis à jour sur un site, d'où son importance en SEO.
Pour les grands sites, une optimisation du crawl budget est nécessaire pour éviter que de nouvelles pages ne restent invisibles pendant des semaines.
Nouveaux conseils de Google pour les sites mobiles
Google a effectué une mise à jour de sa documentation à propos du crawl budget début novembre, en ajoutant une recommandation explicite pour les sites aux versions mobiles et desktop distinctes. Google insiste pour que les sites garantissent une parité de liens entre ces deux versions. Tous les liens présents sur la version desktop doivent également être accessibles sur la version mobile pour éviter des problèmes de découverte et d'indexation.
Deux options sont proposées par Google :
- Inclure les liens de la version desktop sur la version mobile (préféré).
- Si cela est impossible, ajouter tous les liens au fichier sitemap. Cela permet à Google de trouver les nouvelles pages malgré des liens limités sur la version mobile.
Voici le changement exact apporté le 1er novembre dans la documentation de Google :
« Si votre site utilise des versions HTML distinctes pour mobile et desktop, fournissez le même ensemble de liens sur la version mobile que sur la version desktop. Si cela n’est pas possible, assurez-vous que tous les liens sont inclus dans un fichier sitemap. Google n’indexe que la version mobile des pages, et limiter les liens affichés sur celle-ci peut ralentir la découverte de nouvelles pages. »
Pourquoi cette mise à jour est importante ?
La découverte de pages peut être retardée si la version mobile d’un site ne comporte pas tous les liens présents sur la version desktop. Cette situation est particulièrement problématique dans le contexte de l'indexation mobile-first, où Google utilise la version mobile d'un site pour l’indexation et le classement dans les résultats de recherche.
Cette pratique est donc un rappel de l'importance d'une structure de navigation accessible et complète sur mobile, car une structure de liens restreinte peut entraîner des délais dans la découverte des nouvelles pages, réduisant ainsi la visibilité du site.
Qui est impacté par cette mise à jour ?
Google souligne que cette recommandation vise particulièrement :
- Les sites de grande taille, avec des millions de pages ou qui publient des mises à jour fréquentes.
- Les sites de taille moyenne (10 000+ pages), où des changements quotidiens de contenu peuvent poser problème.
- Les sites affichant des URL marquées comme “Découvertes mais non indexées” dans la Google Search Console. Ces sites peuvent bénéficier de cette mise à jour pour éviter des retards dans l'indexation.
Recommandations pratiques pour optimiser le budget de crawl
Pour les propriétaires de sites concernés, Google recommande de :
- Auditer la structure de liens pour garantir la parité entre les versions mobile et desktop.
- Mettre à jour les sitemaps pour inclure toutes les URL essentielles.
- Vérifier que les chemins de navigation principaux sont disponibles sur la version mobile, y compris les liens internes vers les pages importantes.
- Surveiller les statistiques de crawl dans la Google Search Console afin d’identifier rapidement tout problème de découverte.
Source :
- Latest documentation updates (Google Search Central), 1/11/2024
Articles complémentaires :
Google casse les mythes du Crawl Budget : comment favoriser son indexation
Google I/O 2024 : L’événement à ne pas manquer pour découvrir les dernières avancées IA
Gemini en France : les innovations de Google à ne pas manquer en juillet
