Bing changera officiellement le nom de son spider au 1er octobre prochain. De MsnBot, il s'appellera désormais BingBot...
Bing vient d'annoncer que son spider, actuellement baptisé MsnBot, allait changer de nom le 1er octobre prochain pour s'appeler, de façon bien plus logique, BingBot. Son "user agent" sera donc le suivant :
Mozilla/5.0 (compatible; bingbot/2.0 +http://www.bing.com/bingbot.htm)
Dans les fichiers robots.txt, une directive expressément demandée à ce spider s'écrira donc :
User-agent: bingbot
Disallow: /nom-dur-repertoire-a-desindexer/
Il ne restera plus ensuite à BingBot qu'à venir souvent indexer les nouvelles versions de pages ou les nouvelles pages d'un site avec la vélocité de Googlebot, son équivalent d'en face. Et, sur ce point, le chemin est encore très long...
 Source de l'image : Abondance |
Plus d'infos :
- http://www.bing.com/
Source(s) :
- Bing crawler: bingbot on the horizon (Bing)
Articles connexes sur ce site :
- Nouveautés pour le spider de Live Search (13 février 2008)
- Il est frais mon spider, il est frais ! (17 juillet 2007)
- Le fichier Robots.txt
- Google fait un pas vers les éditeurs et annonce un spider spécifique pour Google News (3 décembre 2009)
- 2 nouvelles fonctionnalités dans les Webmaster Tools : Sidewicki et Googlebot mobile (9 mars 2010)
Toutes les pages du réseau Abondance pour la requête spider...
Toutes les pages du Web pour la requête spider...
Bing a clairement du travail à faire au niveau de son spider car avec un spider aussi inefficace que l'actuel ils ne peuvent pas se présenter comme concurrent de Google, MsnBot est assez risible comme spider…