Accueil Nos publications Blog [Devoxx FR 2012] – BigData et Hadoop au secours de téraoctets de logs inexploitables

[Devoxx FR 2012] – BigData et Hadoop au secours de téraoctets de logs inexploitables

Bien souvent quand on parle de logs c’est pour en déplorer l’absence. Mais imaginez à présent la situation inverse où vous auriez tellement de traces qu’au final il ne serait plus possible d’en extraire la moindre information.

Cette situation Pablo Lopez (architecte technique) l’a vécue. Et c’est au cours d’une présentation au Devoxx France 2012 qu’il nous a présenté la solution à ce raz-de-marée de traces.

Le contexte

Tout d’abord parlons chiffres. Les traces mentionnées ici proviennent d’un site web marchand traitant environ 61 millions de commandes / an avec des pics d’activité montant jusqu’à 10 commandes par seconde.

Lire la suite de l’article