Big Data et Business Intelligence de A… Azure
•
0 j'aime•632 vues
Session MCNEXT: Vous découvrirez dans cette session un panorama des services PaaS de Microsoft dans Azure concernant le Big Data et la Business Intelligence. Vous seront présentés les plateformes HD Insight, Azure Stream Analytics, Azure Data Factory mais aussi Azure Machine Learning.
Recommandé
Recommandé
Contenu connexe
Tendances
Tendances (16)
Similaire à Big Data et Business Intelligence de A… Azure
Similaire à Big Data et Business Intelligence de A… Azure (20)
Plus de Microsoft Technet France
Plus de Microsoft Technet France (20)
Big Data et Business Intelligence de A… Azure
- 2. AMBIENT INTELLIGENCE tech days • 2015 #mstechdays techdays.microsoft.fr
- 4. tech.days 2015 #mstechdays SESSION Application & Digital Communication & RSE Business Intelligence Integration & MDM Client Relation Focus Cloud by Microsoft Paris-Lyon-Genève Big Data
- 13. tech.days 2015 #mstechdays SESSION Stockage BigData On-premise On-cloud Filed’attente Transformation Pocesstempsréél Business intelligence BI TEMPS REEL STOCKAGE PERMANENT Analyse Excel Dashboard Power BI Reporting SSRS Azure Machine Learning SQL Server Azure Services de données Microsoft Azure
- 16. tech.days 2015 #mstechdays SESSION Data Source Collect Process Consume Deliver Event Inputs - Event Hub - Azure Blob Transform - Temporal joins - Filter - Aggregates - Projections - Windows - Etc. Correlate Outputs - SQL Azure - Azure Blobs - Event Hub Azure Storage Azure Stream Analytics Reference Data - Azure Blob
- 19. tech.days 2015 #mstechdays SESSION Stockage BigData Filed’attente Transformation Pocesstempsréél Business intelligence Analyse Excel Dashboard Power BI Azure Machine Learning SQL Server Azure Services de données Microsoft Azure 2-Extraction temps réel par lot 1-CollectedesFluxRSS desdépêchesd’une trentainedejournaux Pourladémo, accélérationdutemps pourtraiterenviron3 semainesdeflux
- 24. tech.days 2015 #mstechdays SESSION Pipeline Script IHM Azure Data Factory "type": "Hive", ou "type": "Pig", "type": "Copy",
- 25. tech.days 2015 #mstechdays SESSION Pig Latin Script Hive script DROP TABLE IF EXISTS HiveDepeche; CREATE EXTERNAL TABLE HiveDepeche ( Journal string, Nb int ) ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' LINES TERMINATED BY '10' STORED AS TEXTFILE LOCATION '${hiveconf:RESULTOUTPUT}/ ${hiveconf:Year}/${hiveconf:Month}/${hiveconf:Day}'; INSERT OVERWRITE TABLE HiveDepeche SELECT Journal, count(*) FROM Depeche group by Journal; a = LOAD '$LOGINPUT'; b = foreach a generate flatten(TOKENIZE((chararray)$0)) as word; c = group b by word; d = foreach c generate COUNT(b), group; STORE d INTO '$LOGOUTPUT';
- 26. tech.days 2015 #mstechdays SESSION On Premises SQL Server SQL Azure Azure Blob Storage Activités Dataset 2 Azure Data Factory From Runs On Dataset 1 HDInsight Compute Pipeline1 Autres Pipelines Azure Blob tempory Storage From/To ELT
- 27. tech.days 2015 #mstechdays SESSION // Deploy Table New-AzureDataFactoryTable -DataFactoryName“ADF“ -File File1.json // Deploy Pipeline New-AzureDataFactoryPipeline -DataFactoryName “ADF“ -File File2.json // Start Pipeline Set-AzureDataFactoryPipelineActivePeriod -DataFactoryName “ADF“ -StartTime 02/10/2015 12:00:00
- 29. tech.days 2015 #mstechdays SESSION Stockage BigData Filed’attente Transformation Pocesstempsréél Business intelligence Analyse Excel Dashboard Power BI Azure Machine Learning SQL Server Azure Services de données Microsoft Azure 3-Agrégation et comptage des mots 5b-Analyse prédictive temps réel 2-Extraction temps réel par lot 5a-Analyse temps réel 4- Chargement 1-CollectedesFluxRSS desdépêchesd’une trentainedejournaux Pourladémo, accélérationdutemps pourtraiterenviron3 semainesdeflux
- 35. tech.days 2015 #mstechdays SESSION « Ciel rouge le matin, avertit le marin. » « Plus vite courent les fourmis, plus haut monte le mercure. » « Les oignons ont beaucoup de pelures, l'hiver sera dur. »
- 36. tech.days 2015 #mstechdays SESSION Data Mining in the Cloud : Azure Machine Learning
- 37. tech.days 2015 #mstechdays SESSION …pour découvrir les concepts nécessaires avant d’appréhender le Machine Learning
- 38. tech.days 2015 #mstechdays SESSION Des chiffres et des lettres ! Plutôt nommées: Variables quantitatives Variables qualitatives
- 41. tech.days 2015 #mstechdays SESSION Un échantillon pour l’apprentissage (~60%) Un échantillon pour la validation du modèle (~40%) Ou validation croisée
- 43. tech.days 2015 #mstechdays SESSION Identifier de groupes intrinsèquement homogènes et différents entre eux
- 44. tech.days 2015 #mstechdays SESSION Qu’est-ce qu’une Régression ?
- 46. tech.days 2015 #mstechdays SESSION Importer les données Elaborer le modèle Utiliser l’API
- 48. tech.days 2015 #mstechdays SESSION let Source = Marketplace.Subscriptions(), #"https://api.datamarket.azure.com/data.ashx/aml _labs/lexicon_based_sentiment_analysis/v1/" = Source{[ServiceUrl="https://api.datamarket.azure .com/data.ashx/aml_labs/lexicon_based_sentiment_ analysis/v1/"]}[Feeds], Score = #"https://api.datamarket.azure.com/data.ashx/aml _labs/lexicon_based_sentiment_analysis/v1/"{[Nam e="Score"]}[Data] in Score URL de l’API
- 53. tech.days 2015 #mstechdays SESSION Le Machine Learning est un sport d’équipe. Statisticiens / Mathématiciens DBA Développeurs Data Scientist Fonctionnels / Décideurs Un type à moustache ?
- 55. © 2015 Microsoft Corporation. All rights reserved. tech days • 2015 #mstechdays techdays.microsoft.fr