SlideShare une entreprise Scribd logo
1  sur  26
Télécharger pour lire hors ligne
J'ai déjà un ETL, pourquoi aurais-je
besoin de la Data Virtualization ?
Emily Sergent
Ingénieure avant-vente,
Denodo
2
La donnée, un paysage qui se complexifie
Staging (ODS) Entrepôts
(DWH et Datamarts)
Reporting
(système unique)
Systèmes
opérationnels
(ERP, CRM…)
Systèmes
analytiques
spécialisés
BW
HANA
Data Lake
ETL ETL
Source
unique
Raw zone Trusted Zone Refined Zone
Source
3
En quête de flexibilité
Un ETL est fait pour transformer et restocker la
donnée dans un nouveau format et dans un
nouveau système.
Mais dès que les besoins ou la réalité technique
évoluent, un ETL peut s’avérer fragile et
difficile à adapter.
Considérer l’effort nécessaire pour :
• Intégrer une nouvelle source de données
• Migrer vers le cloud
• Augmenter la fraîcheur de la donnée ou
passer en temps réel
Les limites d’un ETL
En plus, L’ETL n’adresse pas certaines
problématiques courantes de l’intégration
de donnée :
• Modélisation/couche sémantique
• Abstraction et flexibilité pour mettre en
place différentes formes de stockage ou
assurer une migration
• Livraison en multiples formats pour
différents consommateurs (Analytique,
Data Science, API…)
• Sécurité
• Contextualisation, exploration, accès à la
donnée en libre service
5
La multiplication des silos
Streaming
Analytics Data Warehouse
Data Warehouse
Appliance
Product Customer
Asset
Master Data
Management
Cloud Data
Platforms
Graph Database
Advanced
Analytics
Analytical
Tools/Apps
Analytical
Tools/Apps
Analytical
Tools/Apps
Analytical
Tools/Apps
Analytical
Tools/Apps
Analytical
Tools/Apps
Analytical Models
Tools/Apps
Data
Integration
Tools and
Scripts
Data
Integration
Tools and
Scripts
Data
Integration
Tools and
Scripts
Data
Integration
Tools and
Scripts
Data
Integration
Tools and
Scripts
Data
Integration
Tools and
Scripts
Silo Silo Silo Silo Silo Silo Silo
Streaming Data Structured and
Multi-Structured
Data
Multi-Structured
Data
CRM and
customer
interactions
CRM
ERP
SCM
CRM
ERP
SCM CRM
ERP
SCM
Structured Data Structured Data Master Data
Management
• « Casser » peut ignorer la réalité : certains silos sont nés
d’une nécessité technique ou fonctionnelle :
• BUs séparées ou sociétés issues des fusions ou
d’acquisitions
• Domaines métiers
• Cloud/multi-cloud/on-prem
• Contraintes réglementaires
• La réplication n’est pas toujours pratique ou même
possible, et peut nuire à la fiabilité et complexifier la
gouvernance
• Les ETL/ELTs gardent leur utilité… mais ce n’est pas la
seule option pour l’intégration de la donnée
Monolithes vs. silos ?
75% de la donnée stockée
n’est pas utilisée
90% des requêtes concernent
des données en temps réel
7
Trois axes d’organisation
Data Mart
Data Science
Governance
▪ On constate trois axes
d’organisation : fonctionnel,
physique, et accès/usage
▪ Une couche virtuelle permet de
limiter l’adhérence entre les choix
organisationnels et de maximiser
la flexibilité
Access/Usage
API
8
La virtualisation de données : une intégration flexible à la demande
Connecter
✓ Accès en temps réel à des sources de données variées
✓ Tirer parti de la puissance des technologies existantes
✓ Maîtriser la complexité des formats de stockage et des
protocoles d’accès
Combiner
✓ Construire des vues qui ciblent les besoins et cas d’usage métier
✓ Accès à la demande à travers un optimiseur de requêtes
✓ Gouvernance et sécurité appliquées de manière transparente
Consommer
✓ Accès SQL et multidimensionnel : JDBC/ODBC et MDX
✓ Data Services : SOAP, REST, OData, GraphQL
✓ Libre service et exploration : Data catalog intégré
9
Plateforme de virtualisation de données Denodo
Vues
de base
Vues
standardisées
Vues métiers
Sécurité, couche sémantique et optimiseur de requêtes
Sources
de données
Consommateurs
10
Vers une architecture logique
▪ Une architecture distribuée : Les données
résident dans plusieurs systèmes, on-prem ou
dans le cloud
▪ Une architecture logique : Les consommateurs
accèdent aux données via des modèles
sémantiques, découplés de l'emplacement des
données et des schémas physiques
▪ Quelques exemples d’architectures de données
logiques :
▪ L’entrepôt de données logique ou « Logical Data
Warehouse »
▪ Le Data Fabric
▪ Le Data Mesh
11
La Data Virtualization dans un Logical Data Warehouse
Couche
d’accès et
d’abstraction
Modèle
sémantique et
gestion des
metadonnées
Sécurité et
gouvernance
centralisées
Stratégie
d’ingestion
Fournisseur d’API
REST, OData et
GraphQL GeoJSON
12
Architectures et approches logiques à l’intégration de la donnée
Logical Data Warehouse Data Fabric
Data Mesh
Un ETL réplique et achemine la donnée, laissant la sécurité
et la gouvernance à d’autres outils. La virtualisation de
données, par son rôle clé d’accès à la donnée, renforce la
sécurité et permet une gouvernance centralisée.
• Contrôle d’accès basé sur les rôles (RBAC) pour
implémenter des règles d’accès indépendamment de la
source et des consommateurs
• Règles d’accès flexibles : sur les vues, les lignes, les
colonnes, et les valeurs avec un masquage avancé
• Intégration avec votre environnement : AD/LDAP,
Kerberos, SAML, OAuth 2
• Audit complet de tout accès à la donnée à travers la
plateforme
• Documentation de métadonnées centralisée avec
lineage intégrée
Gouvernance et sécurité
Cas d’usage clients
15
Cas d’usage client
✓ Fournisseur d’intelligence métier aux
acteurs de l’industrie pétrolière :
données minières, rendements,
prospection géologique
✓ Il a fallu jusqu'à deux semaines pour
fournir aux clients les données
gouvernementales
✓ Remplacement de l'ancien système
basé sur l'ETL par une plateforme de
virtualisation des données.
✓ Equipe DV de 1.5 personnes
(développeur + admin mi-temps)
Jay Heydt, Manager, DrillingInfo (Enverus)
As a data and business intelligence provider, one of our biggest
challenges is the need to rapidly sell the data that we acquire. The
Denodo Platform enables us to build and deliver data services to our
internal and external consumers within 3-4 hours instead of the 1-2
weeks that would take with ETL."
17
Cas d’usage client
✓ Entreprise biopharmaceutique mondiale
qui cherche à transformer la vie des
personnes atteintes de maladies graves en
neurologie et en immunologie
✓ Cas d’usage centrés sur la donnée, tels
qu'une vue à 360 degrés du patient,
tendances de recrutement, l'allocation
efficace des ressources, etc.
✓ Réduction de l'empreinte ETL
✓ Développement rapide dans le cadre de
l'initiative DevOps
✓ 6 cas d’usage implémentés en une seule
année et d'autres à venir
Sources de données
Netezza
MyAccess
SQL Server
DATA
VIRTUALIZATION
Consommateurs de la donnée
Couche d’accès
18
Cas d’usage client
✓ Fondée en 1983, Prologis fournit des solutions
logistiques immobilières partout dans le monde
✓ Modernisation de l’infrastructure de données
avec une migration cloud, sans temps d'arrêt
prolongés des systèmes existants
✓ Reduction de la complexité ETL et des sources de
données monolithiques ; réintégration des données
issues des modèles data science
✓ Migration progressive et simplifiée vers Snowflake
✓ Accélération estimée à 30% des projets analytiques
19
Cas d’usage client
✓ Besoin : un portail centralisé pour les
techniciens des centres d'appels
✓ Accès aux données internes (CRM,
gestion des incidents, état du réseau,
etc.) et externes (fournisseurs
logistiques, etc.) à partir d'un seul outil.
✓ Réduction de 50 % de la charge de
travail de l'équipe de back-office
✓ Amélioration de la satisfaction des
clients de 94%
En conclusion
21
Le catalogue de données Denodo
Un catalogue de données intégré pour fournir un accès en libre service bâti sur la couche sémantique universelle
Catalogue dynamique qui donne accès aux entités métiers, leur
description et leur contextualisation ainsi que leur contenu
Gouverner – Contrôler et auditer l’accès à la donnée au niveau fin et
de manière centralisée
Décrire – Contextualiser la donnée à travers les catégories, les tags, la
description et les propriétés customisables
Métadonnées basées sur l'utilisation – savoir qui, quand, quoi et
comment on a consommé de la donnée
Préparation des données – la capacité de transformer, d'affiner et de
personnaliser les données à des fins métiers
Interface utilisateur intuitive et adaptée à des rôles métiers, avec la
recherche simplifiée et des capacités de collaboration
22
En conclusion
• Fiabilité des données
▪ Diminuer la réplication et augmenter la pertinence
• Flexibilité pour les utilisateurs métiers
▪ Accéder à toutes les données de l'entreprise en libre-service avec les outils de
leur choix
• Flexibilité pour l’IT
▪ Assurer la modernisation des applications et la migration vers le cloud sans
interruption de service
• Contrôle et gouvernance pour la gestion des données
▪ Renforcer la sécurité, réduire les risques et assurer la conformité
La virtualisation des données peut vous aider à tirer parti des points forts des diverses
technologies de sources de données tout en garantissant :
23
“Product strategy focused on logical and distributed
architectures: Denodo enables its customers to connect distributed
data through business-friendly semantic models that decouple data
from its location and physical schemas. It reflects a longtime focus and
strength in data virtualization that enables agile data integration and
delivery.”
2021 Gartner Magic Quadrant for Data Integration Tools
Gartner : Denodo nommé Leader et “Customers’ choice”
Une fois de plus, Gartner a décerné à
Denodo la distinction “Customer’s
Choice”, avec une note globale
moyenne de 4,4 sur 5,0 au 30
novembre 2021, sur la base de 68 avis
reçus en 18 mois.
62% < 3 mois 91% < 6 mois
Projets Denodo :
- Gartner Peer Insights, Data Integration 2018
Lire le rapport complet sur notre site web
Clients
900+ actifs
F500, G2000 & Start-ups
Santé financière
$4B+ Fond privé (HGGC).
60+% croissance annuelle; Zéro dette;
Rentable.
Présence Denodo
Palo Alto (USA) & A Coruña (Espagne)
Présence mondiale
Leadership
A l’origine et « Pure Player » de la data
virtualization depuis 1999
Reconnaissance des analystes et du marché
en tant que leader (Forrester, Gartner,
Clients depuis 6+ ans)
Nombreux prix
Denodo Technologies
Leader & Pionnier de la Data Virtualization
Technologie
Industrie
Service financier
Assurance
Santé
Secteur public
Télécommunication
Distribution
Pharma / Bio-Tech
Energie
25
Prochaines étapes
Commencer à connecter vos propres sources de données avec la plateforme Denodo !
Denodo Express
• Version gratuite et allégée pour
une installation partout
• Téléchargeable ici
Evaluation collaborative
Contactez-nous !
Denodo Standard Free Trial
• 30 jours d’évaluation offerts
• Accessible ici sur le fournisseur
cloud de votre choix
Merci!
www.denodo.com info@denodo.com
© Copyright Denodo Technologies. All rights reserved
Unless otherwise specified, no part of this PDF file may be reproduced or utilized in any for or by any means, electronic or mechanical, including photocopying and microfilm,
without prior the written authorization from Denodo Technologies.
26

Contenu connexe

Similaire à J'ai déjà un ETL, pourquoi aurais-je besoin de la Data Virtualization?

Réussir sa migration vers le Cloud grâce à la virtualisation des données
Réussir sa migration vers le Cloud grâce à la virtualisation des donnéesRéussir sa migration vers le Cloud grâce à la virtualisation des données
Réussir sa migration vers le Cloud grâce à la virtualisation des donnéesDenodo
 
Session découverte de la Logical Data Fabric soutenue par la Data Virtualization
Session découverte de la Logical Data Fabric soutenue par la Data VirtualizationSession découverte de la Logical Data Fabric soutenue par la Data Virtualization
Session découverte de la Logical Data Fabric soutenue par la Data VirtualizationDenodo
 
Discovery Session France: Atelier découverte de la Data Virtualization
Discovery Session France: Atelier découverte de la Data VirtualizationDiscovery Session France: Atelier découverte de la Data Virtualization
Discovery Session France: Atelier découverte de la Data VirtualizationDenodo
 
Réinventez votre stratégie de données en 2021 avec la Data Virtualization
Réinventez votre stratégie de données en 2021 avec la Data VirtualizationRéinventez votre stratégie de données en 2021 avec la Data Virtualization
Réinventez votre stratégie de données en 2021 avec la Data VirtualizationDenodo
 
La Logical Data Fabric au secours de la connaissance client
La Logical Data Fabric au secours de la connaissance clientLa Logical Data Fabric au secours de la connaissance client
La Logical Data Fabric au secours de la connaissance clientDenodo
 
Session découverte de la Data Virtualization
Session découverte de la Data VirtualizationSession découverte de la Data Virtualization
Session découverte de la Data VirtualizationDenodo
 
Quel est l'avenir des stratégies de données?
Quel est l'avenir des stratégies de données?Quel est l'avenir des stratégies de données?
Quel est l'avenir des stratégies de données?Denodo
 
Session découverte de la Logical Data Fabric soutenue par la Data Virtualization
Session découverte de la Logical Data Fabric soutenue par la Data VirtualizationSession découverte de la Logical Data Fabric soutenue par la Data Virtualization
Session découverte de la Logical Data Fabric soutenue par la Data VirtualizationDenodo
 
Denodo 2022 : le meilleur time-to-Data du marché
Denodo 2022 : le meilleur time-to-Data du marchéDenodo 2022 : le meilleur time-to-Data du marché
Denodo 2022 : le meilleur time-to-Data du marchéDenodo
 
Enterprise Data Hub - La Clé de la Transformation de la Gestion de Données d'...
Enterprise Data Hub - La Clé de la Transformation de la Gestion de Données d'...Enterprise Data Hub - La Clé de la Transformation de la Gestion de Données d'...
Enterprise Data Hub - La Clé de la Transformation de la Gestion de Données d'...Excelerate Systems
 
Optimiser l’intégration globale des données grâce à la Data Virtualization
Optimiser l’intégration globale des données grâce à la Data VirtualizationOptimiser l’intégration globale des données grâce à la Data Virtualization
Optimiser l’intégration globale des données grâce à la Data VirtualizationDenodo
 
Session découverte de la Data Virtualization
Session découverte de la Data VirtualizationSession découverte de la Data Virtualization
Session découverte de la Data VirtualizationDenodo
 
Point de vue expert: la stratégie “ comptoir des données”
Point de vue expert: la stratégie “ comptoir des données”Point de vue expert: la stratégie “ comptoir des données”
Point de vue expert: la stratégie “ comptoir des données”Denodo
 
2020 webinar post In Banque - expérience client
2020 webinar post In Banque - expérience client2020 webinar post In Banque - expérience client
2020 webinar post In Banque - expérience clientNuxeo
 
La Data Virtualization par Orano : cas d'usage à la Hague et démo de Denodo
La Data Virtualization par Orano : cas d'usage à la Hague et démo de DenodoLa Data Virtualization par Orano : cas d'usage à la Hague et démo de Denodo
La Data Virtualization par Orano : cas d'usage à la Hague et démo de DenodoDenodo
 
Denodo, pilier central de votre stratégie API
Denodo, pilier central de votre stratégie APIDenodo, pilier central de votre stratégie API
Denodo, pilier central de votre stratégie APIDenodo
 
Livre blanc data-lakes converteo 2018
Livre blanc data-lakes converteo 2018Livre blanc data-lakes converteo 2018
Livre blanc data-lakes converteo 2018Converteo
 
Virtualisation? Convergence? Cloud? Soyons pragmatique
Virtualisation? Convergence? Cloud? Soyons pragmatique Virtualisation? Convergence? Cloud? Soyons pragmatique
Virtualisation? Convergence? Cloud? Soyons pragmatique Microsoft Ideas
 

Similaire à J'ai déjà un ETL, pourquoi aurais-je besoin de la Data Virtualization? (20)

Réussir sa migration vers le Cloud grâce à la virtualisation des données
Réussir sa migration vers le Cloud grâce à la virtualisation des donnéesRéussir sa migration vers le Cloud grâce à la virtualisation des données
Réussir sa migration vers le Cloud grâce à la virtualisation des données
 
Session découverte de la Logical Data Fabric soutenue par la Data Virtualization
Session découverte de la Logical Data Fabric soutenue par la Data VirtualizationSession découverte de la Logical Data Fabric soutenue par la Data Virtualization
Session découverte de la Logical Data Fabric soutenue par la Data Virtualization
 
Discovery Session France: Atelier découverte de la Data Virtualization
Discovery Session France: Atelier découverte de la Data VirtualizationDiscovery Session France: Atelier découverte de la Data Virtualization
Discovery Session France: Atelier découverte de la Data Virtualization
 
Réinventez votre stratégie de données en 2021 avec la Data Virtualization
Réinventez votre stratégie de données en 2021 avec la Data VirtualizationRéinventez votre stratégie de données en 2021 avec la Data Virtualization
Réinventez votre stratégie de données en 2021 avec la Data Virtualization
 
La Logical Data Fabric au secours de la connaissance client
La Logical Data Fabric au secours de la connaissance clientLa Logical Data Fabric au secours de la connaissance client
La Logical Data Fabric au secours de la connaissance client
 
Session découverte de la Data Virtualization
Session découverte de la Data VirtualizationSession découverte de la Data Virtualization
Session découverte de la Data Virtualization
 
Quel est l'avenir des stratégies de données?
Quel est l'avenir des stratégies de données?Quel est l'avenir des stratégies de données?
Quel est l'avenir des stratégies de données?
 
Session découverte de la Logical Data Fabric soutenue par la Data Virtualization
Session découverte de la Logical Data Fabric soutenue par la Data VirtualizationSession découverte de la Logical Data Fabric soutenue par la Data Virtualization
Session découverte de la Logical Data Fabric soutenue par la Data Virtualization
 
Denodo 2022 : le meilleur time-to-Data du marché
Denodo 2022 : le meilleur time-to-Data du marchéDenodo 2022 : le meilleur time-to-Data du marché
Denodo 2022 : le meilleur time-to-Data du marché
 
Enterprise Data Hub - La Clé de la Transformation de la Gestion de Données d'...
Enterprise Data Hub - La Clé de la Transformation de la Gestion de Données d'...Enterprise Data Hub - La Clé de la Transformation de la Gestion de Données d'...
Enterprise Data Hub - La Clé de la Transformation de la Gestion de Données d'...
 
Optimiser l’intégration globale des données grâce à la Data Virtualization
Optimiser l’intégration globale des données grâce à la Data VirtualizationOptimiser l’intégration globale des données grâce à la Data Virtualization
Optimiser l’intégration globale des données grâce à la Data Virtualization
 
Session découverte de la Data Virtualization
Session découverte de la Data VirtualizationSession découverte de la Data Virtualization
Session découverte de la Data Virtualization
 
Point de vue expert: la stratégie “ comptoir des données”
Point de vue expert: la stratégie “ comptoir des données”Point de vue expert: la stratégie “ comptoir des données”
Point de vue expert: la stratégie “ comptoir des données”
 
Présentation de SQL Azure
Présentation de SQL AzurePrésentation de SQL Azure
Présentation de SQL Azure
 
2020 webinar post In Banque - expérience client
2020 webinar post In Banque - expérience client2020 webinar post In Banque - expérience client
2020 webinar post In Banque - expérience client
 
Ms days rdi - session cloud
Ms days rdi - session cloudMs days rdi - session cloud
Ms days rdi - session cloud
 
La Data Virtualization par Orano : cas d'usage à la Hague et démo de Denodo
La Data Virtualization par Orano : cas d'usage à la Hague et démo de DenodoLa Data Virtualization par Orano : cas d'usage à la Hague et démo de Denodo
La Data Virtualization par Orano : cas d'usage à la Hague et démo de Denodo
 
Denodo, pilier central de votre stratégie API
Denodo, pilier central de votre stratégie APIDenodo, pilier central de votre stratégie API
Denodo, pilier central de votre stratégie API
 
Livre blanc data-lakes converteo 2018
Livre blanc data-lakes converteo 2018Livre blanc data-lakes converteo 2018
Livre blanc data-lakes converteo 2018
 
Virtualisation? Convergence? Cloud? Soyons pragmatique
Virtualisation? Convergence? Cloud? Soyons pragmatique Virtualisation? Convergence? Cloud? Soyons pragmatique
Virtualisation? Convergence? Cloud? Soyons pragmatique
 

Plus de Denodo

Enterprise Monitoring and Auditing in Denodo
Enterprise Monitoring and Auditing in DenodoEnterprise Monitoring and Auditing in Denodo
Enterprise Monitoring and Auditing in DenodoDenodo
 
Lunch and Learn ANZ: Mastering Cloud Data Cost Control: A FinOps Approach
Lunch and Learn ANZ: Mastering Cloud Data Cost Control: A FinOps ApproachLunch and Learn ANZ: Mastering Cloud Data Cost Control: A FinOps Approach
Lunch and Learn ANZ: Mastering Cloud Data Cost Control: A FinOps ApproachDenodo
 
Achieving Self-Service Analytics with a Governed Data Services Layer
Achieving Self-Service Analytics with a Governed Data Services LayerAchieving Self-Service Analytics with a Governed Data Services Layer
Achieving Self-Service Analytics with a Governed Data Services LayerDenodo
 
What you need to know about Generative AI and Data Management?
What you need to know about Generative AI and Data Management?What you need to know about Generative AI and Data Management?
What you need to know about Generative AI and Data Management?Denodo
 
Mastering Data Compliance in a Dynamic Business Landscape
Mastering Data Compliance in a Dynamic Business LandscapeMastering Data Compliance in a Dynamic Business Landscape
Mastering Data Compliance in a Dynamic Business LandscapeDenodo
 
Denodo Partner Connect: Business Value Demo with Denodo Demo Lite
Denodo Partner Connect: Business Value Demo with Denodo Demo LiteDenodo Partner Connect: Business Value Demo with Denodo Demo Lite
Denodo Partner Connect: Business Value Demo with Denodo Demo LiteDenodo
 
Expert Panel: Overcoming Challenges with Distributed Data to Maximize Busines...
Expert Panel: Overcoming Challenges with Distributed Data to Maximize Busines...Expert Panel: Overcoming Challenges with Distributed Data to Maximize Busines...
Expert Panel: Overcoming Challenges with Distributed Data to Maximize Busines...Denodo
 
Drive Data Privacy Regulatory Compliance
Drive Data Privacy Regulatory ComplianceDrive Data Privacy Regulatory Compliance
Drive Data Privacy Regulatory ComplianceDenodo
 
Знакомство с виртуализацией данных для профессионалов в области данных
Знакомство с виртуализацией данных для профессионалов в области данныхЗнакомство с виртуализацией данных для профессионалов в области данных
Знакомство с виртуализацией данных для профессионалов в области данныхDenodo
 
Data Democratization: A Secret Sauce to Say Goodbye to Data Fragmentation
Data Democratization: A Secret Sauce to Say Goodbye to Data FragmentationData Democratization: A Secret Sauce to Say Goodbye to Data Fragmentation
Data Democratization: A Secret Sauce to Say Goodbye to Data FragmentationDenodo
 
Denodo Partner Connect - Technical Webinar - Ask Me Anything
Denodo Partner Connect - Technical Webinar - Ask Me AnythingDenodo Partner Connect - Technical Webinar - Ask Me Anything
Denodo Partner Connect - Technical Webinar - Ask Me AnythingDenodo
 
Lunch and Learn ANZ: Key Takeaways for 2023!
Lunch and Learn ANZ: Key Takeaways for 2023!Lunch and Learn ANZ: Key Takeaways for 2023!
Lunch and Learn ANZ: Key Takeaways for 2023!Denodo
 
It’s a Wrap! 2023 – A Groundbreaking Year for AI and The Way Forward
It’s a Wrap! 2023 – A Groundbreaking Year for AI and The Way ForwardIt’s a Wrap! 2023 – A Groundbreaking Year for AI and The Way Forward
It’s a Wrap! 2023 – A Groundbreaking Year for AI and The Way ForwardDenodo
 
Quels sont les facteurs-clés de succès pour appliquer au mieux le RGPD à votr...
Quels sont les facteurs-clés de succès pour appliquer au mieux le RGPD à votr...Quels sont les facteurs-clés de succès pour appliquer au mieux le RGPD à votr...
Quels sont les facteurs-clés de succès pour appliquer au mieux le RGPD à votr...Denodo
 
Lunch and Learn ANZ: Achieving Self-Service Analytics with a Governed Data Se...
Lunch and Learn ANZ: Achieving Self-Service Analytics with a Governed Data Se...Lunch and Learn ANZ: Achieving Self-Service Analytics with a Governed Data Se...
Lunch and Learn ANZ: Achieving Self-Service Analytics with a Governed Data Se...Denodo
 
How to Build Your Data Marketplace with Data Virtualization?
How to Build Your Data Marketplace with Data Virtualization?How to Build Your Data Marketplace with Data Virtualization?
How to Build Your Data Marketplace with Data Virtualization?Denodo
 
Webinar #2 - Transforming Challenges into Opportunities for Credit Unions
Webinar #2 - Transforming Challenges into Opportunities for Credit UnionsWebinar #2 - Transforming Challenges into Opportunities for Credit Unions
Webinar #2 - Transforming Challenges into Opportunities for Credit UnionsDenodo
 
Enabling Data Catalog users with advanced usability
Enabling Data Catalog users with advanced usabilityEnabling Data Catalog users with advanced usability
Enabling Data Catalog users with advanced usabilityDenodo
 
Denodo Partner Connect: Technical Webinar - Architect Associate Certification...
Denodo Partner Connect: Technical Webinar - Architect Associate Certification...Denodo Partner Connect: Technical Webinar - Architect Associate Certification...
Denodo Partner Connect: Technical Webinar - Architect Associate Certification...Denodo
 
GenAI y el futuro de la gestión de datos: mitos y realidades
GenAI y el futuro de la gestión de datos: mitos y realidadesGenAI y el futuro de la gestión de datos: mitos y realidades
GenAI y el futuro de la gestión de datos: mitos y realidadesDenodo
 

Plus de Denodo (20)

Enterprise Monitoring and Auditing in Denodo
Enterprise Monitoring and Auditing in DenodoEnterprise Monitoring and Auditing in Denodo
Enterprise Monitoring and Auditing in Denodo
 
Lunch and Learn ANZ: Mastering Cloud Data Cost Control: A FinOps Approach
Lunch and Learn ANZ: Mastering Cloud Data Cost Control: A FinOps ApproachLunch and Learn ANZ: Mastering Cloud Data Cost Control: A FinOps Approach
Lunch and Learn ANZ: Mastering Cloud Data Cost Control: A FinOps Approach
 
Achieving Self-Service Analytics with a Governed Data Services Layer
Achieving Self-Service Analytics with a Governed Data Services LayerAchieving Self-Service Analytics with a Governed Data Services Layer
Achieving Self-Service Analytics with a Governed Data Services Layer
 
What you need to know about Generative AI and Data Management?
What you need to know about Generative AI and Data Management?What you need to know about Generative AI and Data Management?
What you need to know about Generative AI and Data Management?
 
Mastering Data Compliance in a Dynamic Business Landscape
Mastering Data Compliance in a Dynamic Business LandscapeMastering Data Compliance in a Dynamic Business Landscape
Mastering Data Compliance in a Dynamic Business Landscape
 
Denodo Partner Connect: Business Value Demo with Denodo Demo Lite
Denodo Partner Connect: Business Value Demo with Denodo Demo LiteDenodo Partner Connect: Business Value Demo with Denodo Demo Lite
Denodo Partner Connect: Business Value Demo with Denodo Demo Lite
 
Expert Panel: Overcoming Challenges with Distributed Data to Maximize Busines...
Expert Panel: Overcoming Challenges with Distributed Data to Maximize Busines...Expert Panel: Overcoming Challenges with Distributed Data to Maximize Busines...
Expert Panel: Overcoming Challenges with Distributed Data to Maximize Busines...
 
Drive Data Privacy Regulatory Compliance
Drive Data Privacy Regulatory ComplianceDrive Data Privacy Regulatory Compliance
Drive Data Privacy Regulatory Compliance
 
Знакомство с виртуализацией данных для профессионалов в области данных
Знакомство с виртуализацией данных для профессионалов в области данныхЗнакомство с виртуализацией данных для профессионалов в области данных
Знакомство с виртуализацией данных для профессионалов в области данных
 
Data Democratization: A Secret Sauce to Say Goodbye to Data Fragmentation
Data Democratization: A Secret Sauce to Say Goodbye to Data FragmentationData Democratization: A Secret Sauce to Say Goodbye to Data Fragmentation
Data Democratization: A Secret Sauce to Say Goodbye to Data Fragmentation
 
Denodo Partner Connect - Technical Webinar - Ask Me Anything
Denodo Partner Connect - Technical Webinar - Ask Me AnythingDenodo Partner Connect - Technical Webinar - Ask Me Anything
Denodo Partner Connect - Technical Webinar - Ask Me Anything
 
Lunch and Learn ANZ: Key Takeaways for 2023!
Lunch and Learn ANZ: Key Takeaways for 2023!Lunch and Learn ANZ: Key Takeaways for 2023!
Lunch and Learn ANZ: Key Takeaways for 2023!
 
It’s a Wrap! 2023 – A Groundbreaking Year for AI and The Way Forward
It’s a Wrap! 2023 – A Groundbreaking Year for AI and The Way ForwardIt’s a Wrap! 2023 – A Groundbreaking Year for AI and The Way Forward
It’s a Wrap! 2023 – A Groundbreaking Year for AI and The Way Forward
 
Quels sont les facteurs-clés de succès pour appliquer au mieux le RGPD à votr...
Quels sont les facteurs-clés de succès pour appliquer au mieux le RGPD à votr...Quels sont les facteurs-clés de succès pour appliquer au mieux le RGPD à votr...
Quels sont les facteurs-clés de succès pour appliquer au mieux le RGPD à votr...
 
Lunch and Learn ANZ: Achieving Self-Service Analytics with a Governed Data Se...
Lunch and Learn ANZ: Achieving Self-Service Analytics with a Governed Data Se...Lunch and Learn ANZ: Achieving Self-Service Analytics with a Governed Data Se...
Lunch and Learn ANZ: Achieving Self-Service Analytics with a Governed Data Se...
 
How to Build Your Data Marketplace with Data Virtualization?
How to Build Your Data Marketplace with Data Virtualization?How to Build Your Data Marketplace with Data Virtualization?
How to Build Your Data Marketplace with Data Virtualization?
 
Webinar #2 - Transforming Challenges into Opportunities for Credit Unions
Webinar #2 - Transforming Challenges into Opportunities for Credit UnionsWebinar #2 - Transforming Challenges into Opportunities for Credit Unions
Webinar #2 - Transforming Challenges into Opportunities for Credit Unions
 
Enabling Data Catalog users with advanced usability
Enabling Data Catalog users with advanced usabilityEnabling Data Catalog users with advanced usability
Enabling Data Catalog users with advanced usability
 
Denodo Partner Connect: Technical Webinar - Architect Associate Certification...
Denodo Partner Connect: Technical Webinar - Architect Associate Certification...Denodo Partner Connect: Technical Webinar - Architect Associate Certification...
Denodo Partner Connect: Technical Webinar - Architect Associate Certification...
 
GenAI y el futuro de la gestión de datos: mitos y realidades
GenAI y el futuro de la gestión de datos: mitos y realidadesGenAI y el futuro de la gestión de datos: mitos y realidades
GenAI y el futuro de la gestión de datos: mitos y realidades
 

J'ai déjà un ETL, pourquoi aurais-je besoin de la Data Virtualization?

  • 1. J'ai déjà un ETL, pourquoi aurais-je besoin de la Data Virtualization ? Emily Sergent Ingénieure avant-vente, Denodo
  • 2. 2 La donnée, un paysage qui se complexifie Staging (ODS) Entrepôts (DWH et Datamarts) Reporting (système unique) Systèmes opérationnels (ERP, CRM…) Systèmes analytiques spécialisés BW HANA Data Lake ETL ETL Source unique Raw zone Trusted Zone Refined Zone Source
  • 3. 3 En quête de flexibilité Un ETL est fait pour transformer et restocker la donnée dans un nouveau format et dans un nouveau système. Mais dès que les besoins ou la réalité technique évoluent, un ETL peut s’avérer fragile et difficile à adapter. Considérer l’effort nécessaire pour : • Intégrer une nouvelle source de données • Migrer vers le cloud • Augmenter la fraîcheur de la donnée ou passer en temps réel
  • 4. Les limites d’un ETL En plus, L’ETL n’adresse pas certaines problématiques courantes de l’intégration de donnée : • Modélisation/couche sémantique • Abstraction et flexibilité pour mettre en place différentes formes de stockage ou assurer une migration • Livraison en multiples formats pour différents consommateurs (Analytique, Data Science, API…) • Sécurité • Contextualisation, exploration, accès à la donnée en libre service
  • 5. 5 La multiplication des silos Streaming Analytics Data Warehouse Data Warehouse Appliance Product Customer Asset Master Data Management Cloud Data Platforms Graph Database Advanced Analytics Analytical Tools/Apps Analytical Tools/Apps Analytical Tools/Apps Analytical Tools/Apps Analytical Tools/Apps Analytical Tools/Apps Analytical Models Tools/Apps Data Integration Tools and Scripts Data Integration Tools and Scripts Data Integration Tools and Scripts Data Integration Tools and Scripts Data Integration Tools and Scripts Data Integration Tools and Scripts Silo Silo Silo Silo Silo Silo Silo Streaming Data Structured and Multi-Structured Data Multi-Structured Data CRM and customer interactions CRM ERP SCM CRM ERP SCM CRM ERP SCM Structured Data Structured Data Master Data Management
  • 6. • « Casser » peut ignorer la réalité : certains silos sont nés d’une nécessité technique ou fonctionnelle : • BUs séparées ou sociétés issues des fusions ou d’acquisitions • Domaines métiers • Cloud/multi-cloud/on-prem • Contraintes réglementaires • La réplication n’est pas toujours pratique ou même possible, et peut nuire à la fiabilité et complexifier la gouvernance • Les ETL/ELTs gardent leur utilité… mais ce n’est pas la seule option pour l’intégration de la donnée Monolithes vs. silos ? 75% de la donnée stockée n’est pas utilisée 90% des requêtes concernent des données en temps réel
  • 7. 7 Trois axes d’organisation Data Mart Data Science Governance ▪ On constate trois axes d’organisation : fonctionnel, physique, et accès/usage ▪ Une couche virtuelle permet de limiter l’adhérence entre les choix organisationnels et de maximiser la flexibilité Access/Usage API
  • 8. 8 La virtualisation de données : une intégration flexible à la demande Connecter ✓ Accès en temps réel à des sources de données variées ✓ Tirer parti de la puissance des technologies existantes ✓ Maîtriser la complexité des formats de stockage et des protocoles d’accès Combiner ✓ Construire des vues qui ciblent les besoins et cas d’usage métier ✓ Accès à la demande à travers un optimiseur de requêtes ✓ Gouvernance et sécurité appliquées de manière transparente Consommer ✓ Accès SQL et multidimensionnel : JDBC/ODBC et MDX ✓ Data Services : SOAP, REST, OData, GraphQL ✓ Libre service et exploration : Data catalog intégré
  • 9. 9 Plateforme de virtualisation de données Denodo Vues de base Vues standardisées Vues métiers Sécurité, couche sémantique et optimiseur de requêtes Sources de données Consommateurs
  • 10. 10 Vers une architecture logique ▪ Une architecture distribuée : Les données résident dans plusieurs systèmes, on-prem ou dans le cloud ▪ Une architecture logique : Les consommateurs accèdent aux données via des modèles sémantiques, découplés de l'emplacement des données et des schémas physiques ▪ Quelques exemples d’architectures de données logiques : ▪ L’entrepôt de données logique ou « Logical Data Warehouse » ▪ Le Data Fabric ▪ Le Data Mesh
  • 11. 11 La Data Virtualization dans un Logical Data Warehouse Couche d’accès et d’abstraction Modèle sémantique et gestion des metadonnées Sécurité et gouvernance centralisées Stratégie d’ingestion Fournisseur d’API REST, OData et GraphQL GeoJSON
  • 12. 12 Architectures et approches logiques à l’intégration de la donnée Logical Data Warehouse Data Fabric Data Mesh
  • 13. Un ETL réplique et achemine la donnée, laissant la sécurité et la gouvernance à d’autres outils. La virtualisation de données, par son rôle clé d’accès à la donnée, renforce la sécurité et permet une gouvernance centralisée. • Contrôle d’accès basé sur les rôles (RBAC) pour implémenter des règles d’accès indépendamment de la source et des consommateurs • Règles d’accès flexibles : sur les vues, les lignes, les colonnes, et les valeurs avec un masquage avancé • Intégration avec votre environnement : AD/LDAP, Kerberos, SAML, OAuth 2 • Audit complet de tout accès à la donnée à travers la plateforme • Documentation de métadonnées centralisée avec lineage intégrée Gouvernance et sécurité
  • 15. 15 Cas d’usage client ✓ Fournisseur d’intelligence métier aux acteurs de l’industrie pétrolière : données minières, rendements, prospection géologique ✓ Il a fallu jusqu'à deux semaines pour fournir aux clients les données gouvernementales ✓ Remplacement de l'ancien système basé sur l'ETL par une plateforme de virtualisation des données. ✓ Equipe DV de 1.5 personnes (développeur + admin mi-temps)
  • 16. Jay Heydt, Manager, DrillingInfo (Enverus) As a data and business intelligence provider, one of our biggest challenges is the need to rapidly sell the data that we acquire. The Denodo Platform enables us to build and deliver data services to our internal and external consumers within 3-4 hours instead of the 1-2 weeks that would take with ETL."
  • 17. 17 Cas d’usage client ✓ Entreprise biopharmaceutique mondiale qui cherche à transformer la vie des personnes atteintes de maladies graves en neurologie et en immunologie ✓ Cas d’usage centrés sur la donnée, tels qu'une vue à 360 degrés du patient, tendances de recrutement, l'allocation efficace des ressources, etc. ✓ Réduction de l'empreinte ETL ✓ Développement rapide dans le cadre de l'initiative DevOps ✓ 6 cas d’usage implémentés en une seule année et d'autres à venir Sources de données Netezza MyAccess SQL Server DATA VIRTUALIZATION Consommateurs de la donnée Couche d’accès
  • 18. 18 Cas d’usage client ✓ Fondée en 1983, Prologis fournit des solutions logistiques immobilières partout dans le monde ✓ Modernisation de l’infrastructure de données avec une migration cloud, sans temps d'arrêt prolongés des systèmes existants ✓ Reduction de la complexité ETL et des sources de données monolithiques ; réintégration des données issues des modèles data science ✓ Migration progressive et simplifiée vers Snowflake ✓ Accélération estimée à 30% des projets analytiques
  • 19. 19 Cas d’usage client ✓ Besoin : un portail centralisé pour les techniciens des centres d'appels ✓ Accès aux données internes (CRM, gestion des incidents, état du réseau, etc.) et externes (fournisseurs logistiques, etc.) à partir d'un seul outil. ✓ Réduction de 50 % de la charge de travail de l'équipe de back-office ✓ Amélioration de la satisfaction des clients de 94%
  • 21. 21 Le catalogue de données Denodo Un catalogue de données intégré pour fournir un accès en libre service bâti sur la couche sémantique universelle Catalogue dynamique qui donne accès aux entités métiers, leur description et leur contextualisation ainsi que leur contenu Gouverner – Contrôler et auditer l’accès à la donnée au niveau fin et de manière centralisée Décrire – Contextualiser la donnée à travers les catégories, les tags, la description et les propriétés customisables Métadonnées basées sur l'utilisation – savoir qui, quand, quoi et comment on a consommé de la donnée Préparation des données – la capacité de transformer, d'affiner et de personnaliser les données à des fins métiers Interface utilisateur intuitive et adaptée à des rôles métiers, avec la recherche simplifiée et des capacités de collaboration
  • 22. 22 En conclusion • Fiabilité des données ▪ Diminuer la réplication et augmenter la pertinence • Flexibilité pour les utilisateurs métiers ▪ Accéder à toutes les données de l'entreprise en libre-service avec les outils de leur choix • Flexibilité pour l’IT ▪ Assurer la modernisation des applications et la migration vers le cloud sans interruption de service • Contrôle et gouvernance pour la gestion des données ▪ Renforcer la sécurité, réduire les risques et assurer la conformité La virtualisation des données peut vous aider à tirer parti des points forts des diverses technologies de sources de données tout en garantissant :
  • 23. 23 “Product strategy focused on logical and distributed architectures: Denodo enables its customers to connect distributed data through business-friendly semantic models that decouple data from its location and physical schemas. It reflects a longtime focus and strength in data virtualization that enables agile data integration and delivery.” 2021 Gartner Magic Quadrant for Data Integration Tools Gartner : Denodo nommé Leader et “Customers’ choice” Une fois de plus, Gartner a décerné à Denodo la distinction “Customer’s Choice”, avec une note globale moyenne de 4,4 sur 5,0 au 30 novembre 2021, sur la base de 68 avis reçus en 18 mois. 62% < 3 mois 91% < 6 mois Projets Denodo : - Gartner Peer Insights, Data Integration 2018 Lire le rapport complet sur notre site web
  • 24. Clients 900+ actifs F500, G2000 & Start-ups Santé financière $4B+ Fond privé (HGGC). 60+% croissance annuelle; Zéro dette; Rentable. Présence Denodo Palo Alto (USA) & A Coruña (Espagne) Présence mondiale Leadership A l’origine et « Pure Player » de la data virtualization depuis 1999 Reconnaissance des analystes et du marché en tant que leader (Forrester, Gartner, Clients depuis 6+ ans) Nombreux prix Denodo Technologies Leader & Pionnier de la Data Virtualization Technologie Industrie Service financier Assurance Santé Secteur public Télécommunication Distribution Pharma / Bio-Tech Energie
  • 25. 25 Prochaines étapes Commencer à connecter vos propres sources de données avec la plateforme Denodo ! Denodo Express • Version gratuite et allégée pour une installation partout • Téléchargeable ici Evaluation collaborative Contactez-nous ! Denodo Standard Free Trial • 30 jours d’évaluation offerts • Accessible ici sur le fournisseur cloud de votre choix
  • 26. Merci! www.denodo.com info@denodo.com © Copyright Denodo Technologies. All rights reserved Unless otherwise specified, no part of this PDF file may be reproduced or utilized in any for or by any means, electronic or mechanical, including photocopying and microfilm, without prior the written authorization from Denodo Technologies. 26