#JSS2014
Les journées
SQL Server 2014
Un événement organisé par GUSS
#JSS2014
Les journées
SQL Server 2014
Un événement organisé par GUSS
Cloud et BI, quelle architecture ?
Jean-Pierre Riehl
#JSS2014
Merci à nos sponsors
#JSS2014#JSS2014
Les évaluations des sessions, c’est important !!
…Et en plus on peut gagner des cadeaux
http://GUSS.Pro/j...
#JSS2014
Jean-Pierre Riehl
Responsable Data & BI – AZEO
http://blog.djeepy1.net
@djeepy1
MVP SQL Server
Membre du Board
Pu...
#JSS2014
ETL DWH Cube Reports
BI traditionnelle (1990-2010)
SSIS SQL SSAS
SSRS
Excel
#JSS2014
De nouveaux challenges BI
 Self-Service BI
 Agilité
 Big Data
 IoT
#JSS2014
Vers la
« Data Culture »
“We believe that with the right tools,
insights can come from anyone, anywhere,
at any t...
#JSS2014
Cloud-First ?
#JSS2014
Get Data Modelize Analyze
?
#JSS2014
Boite à outils « Cloud »
HDInsight
Intelligent
Systems Service
HBase
Storm
Azure
DocumentDB
SQL Azure
IaaS
Power ...
#JSS2014
IaaS PaaS SaaS
QuelCloud?
#JSS2014#JSS2014Source : Albert Barron (https://www.linkedin.com/pulse/article/20140730172610-9679881-pizza-as-a-service)
...
#JSS2014
IaaS
 Des VM
 On retrouve toutes les briques traditionnelles
 SQL Server, SSIS, SSAS, SSRS, SharePoint
VM opti...
#JSS2014
IaaS
VM Core RAM (Go)
A1 - D1 1 1,75
A2 - D2 2 3,5
A3 4 7
D3 4 14
A4 8 14
D4 8 28
A5 - D11 2 14
A6 - D12 4 28
A8 ...
#JSS2014
SaaS
Modèle
Restituer
Partage
Recherche
Q&A
Mobilité
Acquisition Récupérer des données de
sources multiples et le...
#JSS2014
PaaS
HDInsight
Intelligent
Systems Service
HBase
Storm
Azure
DocumentDB
SQL Azure
Azure Blob
Azure Machine
Learni...
#JSS2014
SQL Azure
• WA SQL : Windows Azure SQL
• SQL Server en mode PaaS
…avec des limitations
• Principe de Scale-Out : ...
#JSS2014
• Espace de stockage Cloud
– Blob = binaire (ie. ce que vous voulez : csv, json, etc.)
– Table = entités
• Utilis...
#JSS2014
• Stockage de documents JSON
 Schema-free
• Les documents sont rangés dans des collections
• Requêtes en SQL (li...
#JSS2014
HDInsight : le monde Big DataHDInsight
Azure Blob HDFS
Sqoop
Oozie
Azure UX
SDK
Azure
WebHcat/
Templeton
RDP
Yarn...
#JSS2014
• Permet d’analyser des flux temps réel
– Millions d’événements / seconde
– 365 jours de rétention (ou 20To)
• Ba...
#JSS2014
IoT : Internet of Things Intelligent
Systems Service
ISS
#JSS2014
• Data Mining 2.0
• Données en entrée
– HDInsight (Hive)
– SQL Azure
– Azure Tables
– Données locales (fichiers)
...
#JSS2014
• Support de R
• Requêtable par Web Service
– Azure ML API
• ML Studio Principe de la paillasse de
laboratoire
– ...
#JSS2014
• Consume, Orchestrate, Transform
– Principe de Data Pipeline
– Cloud-ETL
Azure Data Factory Azure Data
Factory
#JSS2014
• Sources / Destinations
– Données OnPrem (SQL Server)
– Azure Blob / Azure Tables
– SQL Azure
• Transformation
–...
#JSS2014
AZURE DATA FACTORY
#JSS2014
• Pipeline de données asynchrone
– Notion de conditions et disponibilité
• Reprise sur erreur
• Haute-disponibili...
#JSS2014
HDInsight
Intelligent Systems
Service
HBase
Storm
Azure
DocumentDB
SQL Azure
IaaS
Power BI
Azure Blob Azure Machi...
#JSS2014
Hybrid
• Une partie des données reste On-Premises
• Data Management Gateway
• Express Route
• APS (Analytics Plat...
#JSS2014
Les enjeux
• Data Movement
– Bande passante
• Sécurité
– Connexion, Containment
• Redondance des données
#JSS2014
De nouvelles questions
 Data Lake, Datawarehouse, Datamart ?
 Data Virtualization
 Schema-less / Schema-bound
...
#JSS2014
Un nouveau métier :
Data Architect
#JSS2014
Merci !
Des questions ?
Découvrez nos offres
 Self-Service BI
 Agile BI
 Hybrid-BI
 Data Strategy
Information...
#JSS2014#JSS2014
Prochain SlideShare
Chargement dans…5
×

Cloud et BI, quelle architecture pour 2014 ?

524 vues

Publié le

Session présentée lors des Journées SQL Server 2014
----
La BI Microsoft a bien changée depuis 2005. Aujourd’hui, c’est Cloud-First et Mobile-First, mais comment s’y retrouver et choisir la bonne architecture ? Power BI, HDInsight, DMG, IaaS, SQL Azure, etc.
Dans cette session nous ferons le tour des composants BI et verrons comment ils s’articulent ensemble pour construire un système de gestion de l’information moderne.

Publié dans : Données & analyses
0 commentaire
3 j’aime
Statistiques
Remarques
  • Soyez le premier à commenter

Aucun téléchargement
Vues
Nombre de vues
524
Sur SlideShare
0
Issues des intégrations
0
Intégrations
5
Actions
Partages
0
Téléchargements
19
Commentaires
0
J’aime
3
Intégrations 0
Aucune incorporation

Aucune remarque pour cette diapositive
  • On parlait des speakers, il y a une chose qui leur tient à cœur !
  • Et tout cela dans un monde où tout va toujours de + en + vite  time to market
  • D14 SSD = 800MB/s Read sequential – 400 en write
  • http://msdn.microsoft.com/en-us/library/azure/ee336245.aspx
    http://msdn.microsoft.com/en-us/library/azure/ee336281.aspx
  • Collections limitées à 10Go
  • Cluster Hadoop
    Hbase  NoSQL (ex : Key/Value Store)
    Storm  Real-time, basé sur des streams (des spouts et des bolts)
  • Cloud et BI, quelle architecture pour 2014 ?

    1. 1. #JSS2014 Les journées SQL Server 2014 Un événement organisé par GUSS
    2. 2. #JSS2014 Les journées SQL Server 2014 Un événement organisé par GUSS Cloud et BI, quelle architecture ? Jean-Pierre Riehl
    3. 3. #JSS2014 Merci à nos sponsors
    4. 4. #JSS2014#JSS2014 Les évaluations des sessions, c’est important !! …Et en plus on peut gagner des cadeaux http://GUSS.Pro/jss
    5. 5. #JSS2014 Jean-Pierre Riehl Responsable Data & BI – AZEO http://blog.djeepy1.net @djeepy1 MVP SQL Server Membre du Board Pure-Player Microsoft  Spécialiste Self-Service BI  Projets « Agile BI »  Stratégie Data  Hybrid-BI
    6. 6. #JSS2014 ETL DWH Cube Reports BI traditionnelle (1990-2010) SSIS SQL SSAS SSRS Excel
    7. 7. #JSS2014 De nouveaux challenges BI  Self-Service BI  Agilité  Big Data  IoT
    8. 8. #JSS2014 Vers la « Data Culture » “We believe that with the right tools, insights can come from anyone, anywhere, at any time. When that happens, organizations develop what we describe as a data culture.“ Satya Nadella, CEO Microsoft
    9. 9. #JSS2014 Cloud-First ?
    10. 10. #JSS2014 Get Data Modelize Analyze ?
    11. 11. #JSS2014 Boite à outils « Cloud » HDInsight Intelligent Systems Service HBase Storm Azure DocumentDB SQL Azure IaaS Power BI Azure Blob Azure Machine Learning Azure Data Factory Azure Stream Analytics
    12. 12. #JSS2014 IaaS PaaS SaaS QuelCloud?
    13. 13. #JSS2014#JSS2014Source : Albert Barron (https://www.linkedin.com/pulse/article/20140730172610-9679881-pizza-as-a-service) IaaS, PaaS, SaaS.
    14. 14. #JSS2014 IaaS  Des VM  On retrouve toutes les briques traditionnelles  SQL Server, SSIS, SSAS, SSRS, SharePoint VM optimisées A1 -> D14 Azure Active Directory Express Route
    15. 15. #JSS2014 IaaS VM Core RAM (Go) A1 - D1 1 1,75 A2 - D2 2 3,5 A3 4 7 D3 4 14 A4 8 14 D4 8 28 A5 - D11 2 14 A6 - D12 4 28 A8 - D13 8 56 A9 - D14 16 112  Série D :  SSD  faster CPU  Standard / Basic  Version DWH :  16 disques  15TB D14 : 3 325€ / mois
    16. 16. #JSS2014 SaaS Modèle Restituer Partage Recherche Q&A Mobilité Acquisition Récupérer des données de sources multiples et les façonner au besoin Partager les modèles, constituer un Catalogue de Données et collaborer Créer des modèles d’analyse et de calculs en toute autonomie Restituer les données dans des tableaux de bords interactifs et riches Faites parler vos données en les interrogeant en langage naturel Accéder à vos rapports simplement depuis n’importe quel terminal Dimensionnement | Gestion | Sécurité PowerBI
    17. 17. #JSS2014 PaaS HDInsight Intelligent Systems Service HBase Storm Azure DocumentDB SQL Azure Azure Blob Azure Machine Learning Azure Data Factory Azure Stream Analytics
    18. 18. #JSS2014 SQL Azure • WA SQL : Windows Azure SQL • SQL Server en mode PaaS …avec des limitations • Principe de Scale-Out : Sharding/Federation • Assistants de migration • Outils de gestion (SSDT, SSMS, Online) SQL Azure
    19. 19. #JSS2014 • Espace de stockage Cloud – Blob = binaire (ie. ce que vous voulez : csv, json, etc.) – Table = entités • Utilise des API pour manipuler  Plutôt orienté développeur • Azure Blob à la base d’autres services Azure Azure Blob / Azure Tables Azure Blob
    20. 20. #JSS2014 • Stockage de documents JSON  Schema-free • Les documents sont rangés dans des collections • Requêtes en SQL (light) • API REST • Attention : Eventual Consistency  Orienté développeurs Azure DocumentDB Azure DocumentDB
    21. 21. #JSS2014 HDInsight : le monde Big DataHDInsight Azure Blob HDFS Sqoop Oozie Azure UX SDK Azure WebHcat/ Templeton RDP Yarn Hive Pig HCatalog AmbariMap/Reduce StormHBase HDInsight HBase Storm
    22. 22. #JSS2014 • Permet d’analyser des flux temps réel – Millions d’événements / seconde – 365 jours de rétention (ou 20To) • Basé sur Event Hub • Syntaxe SQL • Export vers SQL Azure Azure Stream Analytics Azure Stream Analytics SELECT Category, COUNT(*) FROM Input TIMESTAMP BY EntryTime GROUP BY Category, SlidingWindow(minute, 5)
    23. 23. #JSS2014 IoT : Internet of Things Intelligent Systems Service ISS
    24. 24. #JSS2014 • Data Mining 2.0 • Données en entrée – HDInsight (Hive) – SQL Azure – Azure Tables – Données locales (fichiers) Azure Machine Learning Azure Machine Learning
    25. 25. #JSS2014 • Support de R • Requêtable par Web Service – Azure ML API • ML Studio Principe de la paillasse de laboratoire – Démarrage immédiat Azure Machine Learning Azure Machine Learning
    26. 26. #JSS2014 • Consume, Orchestrate, Transform – Principe de Data Pipeline – Cloud-ETL Azure Data Factory Azure Data Factory
    27. 27. #JSS2014 • Sources / Destinations – Données OnPrem (SQL Server) – Azure Blob / Azure Tables – SQL Azure • Transformation – Map/Reduce – Hive/Pig – Custom Activities : C# Azure Data Factory Azure Data Factory
    28. 28. #JSS2014 AZURE DATA FACTORY
    29. 29. #JSS2014 • Pipeline de données asynchrone – Notion de conditions et disponibilité • Reprise sur erreur • Haute-disponibilité • Monitoring Azure Data Factory Azure Data Factory
    30. 30. #JSS2014 HDInsight Intelligent Systems Service HBase Storm Azure DocumentDB SQL Azure IaaS Power BI Azure Blob Azure Machine Learning Azure Stream Analytics Get Data Modelize Analyze Store Manage SSIS SQL SSAS Azure Data Factory
    31. 31. #JSS2014 Hybrid • Une partie des données reste On-Premises • Data Management Gateway • Express Route • APS (Analytics Platform System)
    32. 32. #JSS2014 Les enjeux • Data Movement – Bande passante • Sécurité – Connexion, Containment • Redondance des données
    33. 33. #JSS2014 De nouvelles questions  Data Lake, Datawarehouse, Datamart ?  Data Virtualization  Schema-less / Schema-bound  Gestion du changement  Etc.
    34. 34. #JSS2014 Un nouveau métier : Data Architect
    35. 35. #JSS2014 Merci ! Des questions ? Découvrez nos offres  Self-Service BI  Agile BI  Hybrid-BI  Data Strategy Informations sur le stand AZEO
    36. 36. #JSS2014#JSS2014

    ×