Dans une présentation au WSDM 2009, Web Search and Data Mining, à Barcelone, Jeff Dean a donné quelques informations sur Google qui n'ont apparemment pas encore été communiquées jusqu'ici. Petit détour dans les entrailles du géant.

Entre 1999 et 2009, Google estime que le nombre de queries qu'ils reçoivent a été multiplié par 1000. Du côté des machines, l'équation est simple, pour répondre à la multiplication des queries, Google a aussi multiplé son nombre de machines, par 1000 aussi! Et grâce à leurs optimisations, ils ont réussi à faire tomber d'un temps de réponse de 1s pour une recherche à environ moins de 200ms maintenant.

La dernière statistique intéressante est au niveau de la mise à jour des données, en effet, Google détecte maintenant quasi instantanément les changements sur certains sites et reflète le nouveau contenu en quelques heures, pour certains, comparé à quelques mois en moyenne auparavant. Ils estiment de ce côté avoir fait une amélioration par un facteur 10.000. Mais à quel coût parfois pour les serveurs visités, ça c'est une autre histoire.