J1 T1 2 - Azure DocumentDB, une base de données extrêmement rapide à l’échelle de la planète - Arnaud Comet

1. MS Cloud Summit
DocumentDB, une base de donnée extrêmement
rapide à l’échelle de la planète
Arnaud Comet
Program Manager, Microsoft
acomet@microsoft.com

2. DocumentDB-Faits
askdocdb@microsoft.com
acomet@microsoft.com

3. Accélérationdel’innovation
3
Support Upsert
Order By
Géospatial
Connecteur Power BI
Stream Analytics
Support
Geo-replication globale
Collection Partitionnée
Protocole MongoDB
Connecteur Hadoop
TTL (Time To Leave)
Support SDK pour “Retry”
automatique
Transaction multi-
document
Planificateur des ressources
mis à jour
Emulateur local
(DocumentDB gratuit)
Support Change
Feed/Streams
Expansion Globale (Ring 0)
Support géospatial
amélioré: indexation
automatique polygone et
objets LineString
Amélioration des métriques
Compliance

4. Evolution NoSQL
Volume
Architectures
hyperconvergente/
hyperscale
Partitionnement
horizontal
Extensibilité
élastique
Vitesse
Base de données
optimisées pour l’
écriture
Distribution globale
Topologies Actif-
Actif
Niveaux de
cohérence ajustable
Variété
Base de données
dynamiques
Pas de schemas
Concept d’indexage
logique
2009
MongoDB/
Riak/Neo4J
2015
DocumentDB
GA
2006
BigTablep
aper
Cassandra
20082007
Dynamo paper/
AWS SimpleDB
2014
DocumentDB
Preview
20162012
AWS DynamoDB
2010
Project
Florence

5. Pasuneseulesolutionpourtous
Azure PaaS
Evolution verticale
Co-located compute & storage
Index Mgmt
/QP
Persistence
locale
Local compute
& storage
• Base de donnée
1TB (futur, 4TB)
Azure SQL DB
Optimisée pour
lecture
Relational
…
Index Mgmt
/QP
Persistence
locale
Local compute &
storage on each
shard
Evolution horizontale
Co-located compute & storage
• Une seule collection de1PB &
100s of millions of req/sec
• Plusieurs collections par base
de donnée
Azure DocumentDB
Optimisée pour lecture/écriture
NoSQL

6. Compromis 2x2 des bases de données
Microsoft Confidential (under NDA)

7. Capacités de DocumentDB

8. Demos
• Extensibilité instantanée
• Distribution des données à l’échelle de la planète
• Interface de requête
• Migration de données + DocumentDB avec Power
BI

9. Gestiondesdonnées • Les ressources sont gérées en tant
qu'éléments (documents JSON
contenant des métadonnées) et en
tant que flux (collections d'éléments)
• Chaque base de données contient
plusieurs collections qui comportent:
 Documents
 Procédures stockées, des
déclencheurs, des fonctions
définies par l’utilisateur
 Pièces jointes associées
• Une base de donnée est aussi associée
à:
 Utilisateurs possédant un
ensemble d'autorisations d’accés

10. Azure DocumentDB
Contrat de niveau
service SLA (99.99%)
Tout cela avec

11. ElasticitéextensibleTransactions+Stockage
∞

12. Elasticité extensible du
stockage
• Système conçu pour une extensibilité
indépendante du stockage et des
transactions
• Serveur transparent pour le management
des partitions et routage
• Indexage automatique en stockage SSD
• Distribution globale automatique des
données au sein de plusieurs régions
• Possibilité d’effacer les données usagées
automatiquement (TTL support)

13. Plus de transactions
Moins de transactions
9PM PST
Elasticité extensible
des transactions
• Changement élastique des débits
approvisionnés de 100 à 10
millions de transactions par
seconde
• Le provisionnement de
DocumentDB a un coût horaire
• Gratuit: émulateur
• Minimum: 400 RU/sec
Moins de
transactions
Plus de transactions
11PM PST
9PM PST

14. Demos
• Extensibilité instantanée
• Distribution des données à l’échelle de la planète
• Interface de requête
• Migration de données + DocumentDB avec Power
BI

15. Faible latence
garantie
“Je veux mes données au plus proche de
mes clients”
Lecture <10ms @ P99, <1ms @ P50
Ecriture <15ms @ P99, <6ms at P50
• Distribution mondiale des
écriture/lecture au niveau local
• Optimisé pour l’écriture rapide et
multiple sur un stockage SSD
• Indexage automatique et synchrone à
des taux d’ingestion élevés

16. Garantiedutraitementdesdonnéesdansles millisecondes
16

17. Distributionmondiale

18. Présence
TBD
En tant que service Ring 0, Document sera disponible par défaut dans toute nouvelle région

19. Demos
• Extensibilité instantanée
• Distribution des données à l’échelle de la planète
• Interface de requête
• Migration de données + DocumentDB avec Power
BI

20. Disponibilité de 99,99 %
en cas de défaillance
• Tous les clusters sont
configurés avec 10-20
domaines d’erreur
• Chaque partition a 3 réplicas
locaux
99.99%

21. HauteDisponibilité
21
99.99% SLA

22. Riches requêtes langage SQL, JavaScript et MongoDB
• Requêtes utilisant SQL ou/et JavaScript
• Exprimez la logique d’application en tant
que procédures stockées, déclencheurs et
fonctions définies par l’utilisateur à l’aide du
code JavaScript standard
• Toute la logique JavaScript est exécutée
dans une transaction ACID ambiante avec
isolement de capture instantanée
• MongoDB API bientôt en GA

23. Demos
• Extensibilité instantanée
• Distribution des données à l’échelle de la planète
• Interface de requête
• Migration de données + DocumentDB avec Power
BI

24. Niveaux de
cohérence ajustable
• Quatre niveaux de cohérence
ajustables
• Etre une base de donnée a réplication
mondiale nous force à naviguer le
CAP théorème
• Ces niveaux de cohérence sont plus
en phase avec les compromis PACELC
Strong consistency,
High latency
Eventual consistency,
Low latency
27%
3%
54%
16%
Observed Distribution
BoundedStaleness
Eventual
Session
Strong
Unique à DocumentDB

25. Indexage sans schema
• A grande échelle, ALTER TABLE et le management du
schéma/index sont difficiles à manager
• Indexation automatique et synchrone de toutes le données
ingérées – hash, range, géospatial, time-series (+Columnar en
2017 H1)
• Aucun index secondaire nécessaire!
• Base de donnée optimisée pour de nombreuses écritures
• Gouvernance de ressource complètement managée
• Transformation de l‘index en ligne et sur place (in-situ)
No Problem
No Schema

26. Change Feed • Modèle Lambda avec TCO bien inférieur
• Unique base de donnée pour l’ingestion et l’analyse de
données

27. Sécurité

28. DocumentDB Emulateur local
Gratuit, a télécharger et très proche de la version cloud de DocumentDB pour dev/test au niveau local

29. Compliance(certified)
29
Certification Details Compliance
Status
Strong Privacy and Security Commitments
· No mining of customer data for advertising
· No voluntary disclosure to law enforcement agencies
Achieved
Strong Privacy and Security Commitments Achieved
ISO 27001 Achieved
ISO 27018 Achieved
EU Model Clauses (EUMC) Achieved
Strong Privacy and Security Commitments Achieved
ISO 27001 Achieved
ISO 27018 Achieved
EU Model Clauses (EUMC) Achieved
HIPAA Business Associate Agreement Achieved
Strong Privacy and Security Commitments Achieved
ISO 27001 Achieved
ISO 27018 Achieved
EU Model Clauses (EUMC) Achieved
HIPAA Business Associate Agreement Achieved
Contractual commitment to meet US and EU data residency requirements Achieved

30. Demos
• Extensibilité infinie et instantanée
• Distribution des données à l’échelle de la planète
• Interface de requête
• Migration de données + DocumentDB avec Power
BI