Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

HUG France #3 – 28 Juin 2012

Retour du Hadoop Summit 2012

Une p'tite virée dans la Silicon Vallée

Charly CLAIRMONTcharly.clairmont@altic.org@egwada

BigData Camp

Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

Hadoop révolutionne !

Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale

- Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

Architecture BigData

● Multistructured Data● Non structuré + Structuré

● BigData● NoSQL + Hadoop + SGBDR

Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale

- Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

BigData est partout

● Digitalisation de la culture

● BigData

● Vers une nouvelle économie (encore une autre)

● Vers la Troisième Révolution Industrielle (cf : Jeremy Rifkin)

Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale

- Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

De nouvelles frontières pour Hadoop

● Hadoop HA● HDFS Federated● Map Reduce 2.0 aka Yarn● Hcatalog● Ambari● Hadoop encore plus cloudable

● VMWare / Sorengeti● Amazon

Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale

- Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

Hadoop Temps réel

● Le nouveau Map Reduce : YARN● Storm● Giraph● S4● Spark

Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale

- Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

Le grand débat Pig vs Hive

Pig● New School● Flexible / Simple● ETL● Mise en œuvre UDF

Hive● Old School● Rigide / Connu● Interrogation● JDBC / ODBC

Hadoop DW

Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale

- Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

Mes coups de cœurs

● Spark● Compatible Hadoop● Temps réel

– resilient distributed datasets (proche de l'idée de map reduce online)

● Shark

● Giraph● Architecture Alternative pour l'Analytique

● Hadoop + Search Engine

Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale

- Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

On aurait aimé voir

● Hyrackshttp://code.google.com/p/hyracks/

● Clydesdalehttp://sandeeptata.blogspot.fr/2012/01/clydesdale-sql-on-hadoop.html

● ASTERIXhttp://asterix.ics.uci.edu

Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

HUG France #3 - 28 Juin 2012

Retour Hadoop Summit 2012

Merci pour votre attention

Charly CLAIRMONTCharly CLAIRMONT@egwada