L'outil Google Sitemaps offre une fonctionnalité bien utile depuis aujourd'hui, avec un analyseur de fichier robots.txt. Dans l'interface utilisateur de l'outil, un onglet "robots.txt" permet de tester la validité du fichier que vous avez créé sur votre site, autorisant ou interdisant l'accès à vos pages de la part des robots des moteurs :
L'outil vous indique alors si votre fichier est bien écrit et quelles sont les pages qui sont bloquées ou non pour Googlebot, le robot du moteur. Un analyseur bien pratique pour savoir si vous n'avez pas fait de faute de syntaxe dans la rédaction (parfois complexe) de ce fichier...
http://www.google.com/webmasters/sitemaps/login
Source : Google
Publier un commentaire
Articles complémentaires :
Google va explorer des alternatives au fichier robots.txt
Par Mathilde Grattepanche
07 Juil 2023
·
3 minutes de lecture
Fichier robots.txt : plus besoin de le placer sur le domaine racine !
Par Mathilde Grattepanche
04 Juil 2024
·
4 minutes de lecture
Goossips SEO : fichier robots.txt
Par Johan Sellitto
15 Oct 2024
·
3 minutes de lecture
Google Search Console dévoile son nouveau rapport robots.txt
Par Mathilde Grattepanche
17 Nov 2023
·
2 minutes de lecture
Goossips SEO : URL canonique, robots.txt, X-RateLimit
Par Johan Sellitto
06 Août 2024
·
3 minutes de lecture
Google-Safety : le crawler qui ignore les Robots.txt
Par Mathilde Grattepanche
15 Nov 2023
·
2 minutes de lecture
