matt cutts

Matt Cutts explique dans une nouvelle vidéo comment Google utilise Percolator, Dremel et Pregel, trois outils intégrés dans son architecture technique depuis Caffeine...

Matt Cutts vient de mettre en ligne une nouvelle vidéo (4'04", tee-shirt bleu aussi bien ciblé que celui de la veille 🙂 ), répondant à la question How does Google use Percolator, Dremel and Pregel? ou, en français, "Comment Google utilise-t-il Percolator, Dremel et Pregel ?".

La première question qu'on se pose, bien évidemment, en lisant la question, est : "c'est quoi, Percolator, Dremel et Pregel ?" 🙂

Il s'agit en fait de trois outils très techniques utilisés par Google, notamment dans son infrastructure technique :
- Percolator est en lien avec Caffeine (logique...), l'architecture technique du moteur mise en place en 2010. Il permet de mettre en place des mises à jour de l'index de façon progressive et est expliqué plus en détail dans ce document PDF.
- Dremel (en référence à une marque d'outils) (ce système a également droit à une explication sous la forme d'un PDF) est un système d'analyse de données extrêmement rapide lorsque les tailles de fichiers sont énormes, à l'image du Web.
- Pregel (explications ici et ici) est un système de graphes inspiré du Bulk Synchronous Parallel Model.

Bref, ces trois outils sont une partie de la "grosse tuyauterie" utilisée par Google pour mettre en oeuvre son moteur de recherche avec des performances techniques toujours accrues...


Source de l'image : Google