> > Percolator, Dremel et Pregel : 3 outils utilisés par Google

Percolator, Dremel et Pregel : 3 outils utilisés par Google


Notez cet article

matt cutts

Matt Cutts explique dans une nouvelle vidéo comment Google utilise Percolator, Dremel et Pregel, trois outils intégrés dans son architecture technique depuis Caffeine...

Matt Cutts vient de mettre en ligne une nouvelle vidéo (4'04", tee-shirt bleu aussi bien ciblé que celui de la veille 🙂 ), répondant à la question How does Google use Percolator, Dremel and Pregel? ou, en français, "Comment Google utilise-t-il Percolator, Dremel et Pregel ?".

La première question qu'on se pose, bien évidemment, en lisant la question, est : "c'est quoi, Percolator, Dremel et Pregel ?" 🙂

Il s'agit en fait de trois outils très techniques utilisés par Google, notamment dans son infrastructure technique :
- Percolator est en lien avec Caffeine (logique...), l'architecture technique du moteur mise en place en 2010. Il permet de mettre en place des mises à jour de l'index de façon progressive et est expliqué plus en détail dans ce document PDF.
- Dremel (en référence à une marque d'outils) (ce système a également droit à une explication sous la forme d'un PDF) est un système d'analyse de données extrêmement rapide lorsque les tailles de fichiers sont énormes, à l'image du Web.
- Pregel (explications ici et ici) est un système de graphes inspiré du Bulk Synchronous Parallel Model.

Bref, ces trois outils sont une partie de la "grosse tuyauterie" utilisée par Google pour mettre en oeuvre son moteur de recherche avec des performances techniques toujours accrues...


Source de l'image : Google

1 commentaire
  1. Jérôme 13 mars 2014 at 0 h 26 min

    Pas vu passer mais si tous les derniers brevets de Google vous intéresse (je ne sais pas si ces outils on fait l'objet d'un brevet), vous pouvez les trouver ici :
    http://stks.freshpatents.com/GOOG-sym.php

Un site du Réseau Abondance | Olivier Andrieu | Contact | Publicité sur le site