Présentation Ysance Big Data Paris 2014 : Montée en compétence sur la plateforme Hadoop.

1. MONTER EN PUISSANCE ET EN
AUTONOMIE SUR UNE
PLATEFORME HADOOP ?
Romain Chaumais – romain.chaumais@ysance.com

3. Notre métier
Agence conseil en Technologie Digitale
Conception, mise en œuvre et animation
de Plateformes Digitales
Organisée autour de 7 offres
Digital
Marketing Ecommerce CRM
Cloud
Computing
Business
Intelligence
Data
Management Big Data

4. Comment monter en puissance et en
autonomie sur une plateforme Hadoop ?
Romain Chaumais

5. CONSEIL #1
DÉMYSTIFIER LA BÊTE

10. CONSEIL #2
FAIRE COMME AVANT

12. Les bénéfices de la « base de données » Hadoop
12
Gestion des données
structurées, peu structurées
et non structurées
Massivement Scale-Out
(Gestion du temps
contraint)
Faible coût de
possession
Intégrée et compatible
avec l’écosystème BI
traditionnel
Pas de modèle de
données à priori
Grande capacité de
stockage
De plus en plus compatible
avec des usages temps réel
(Flume, Hbase, Impala)

16. CONSEIL #3
CHOUCHOUTER
LES ADMIN SYSTÈMES

23. CONSEIL #4
OSER SE JETTER À L’EAU

27. Architecture logique & applicative
avec un ecosystème Hadoop
…
Cluster élastique : CPU / RAM / Disk / Network
Stockage HDFS / MAPRFS
Transformations Batch : Map Reduce (Hive /Pig)
Transactions Temps réel : Hbase / Cassandra / etc.
Moteur de recherche Temps réel : ElasticSearch/SolR
Requêtes Temps réel : Impala / Presto / Spark / etc.
Orchestrationdestraitements:ETL
Donnéessources
Ventes
Web.com
Logs
Autres …
API
Accès Apps tierces
Temps réel (R/W)
Browser
Apps Opérationnelles
HTML Temps réel
(Search / Pilotage)
HTTP/REST/JSON
Outils BI
Apps Analytiques
Données historisées
Pour les 3 BI
SQLODBC/JDBCFilesSystem/Shell
Fichiers
Échange de
données par fichiers
Input / Output
Shell
Interaction en ligne
de commande
Collecte et streaming : Flume, SyslogNG, Storm

29. CONSEIL #5
CONSTRUIRE UNE
HISTOIRE D’AMOUR

36. CONSEIL #6
APPELER UN AMI
http://ysance.com/nous-contacter.htm

37. ET SI VOUS SUIVEZ BIEN TOUS CES CONSEILS …

38. #MYJOB
DOMPTEUR DE HADOOP

39. Merci
MERCI
Romain Chaumais – romain.chaumais@ysance.com