GAB 2018 PARIS - Mettez un peu de CI/CD dans vos projets data! par Guillaume Rouchon

•Télécharger en tant que PPTX, PDF•

0 j'aime•93 vues

Intégration continue et déploiement continu ne sont pas réservés uniquement aux projets de développement. Il est tout à fait possible d'appliquer ces principes aux projets data tel que vos bases de données, vos pipelines data factory ou vos modèles analysis services ; c'est ce que nous vous proposons de venir découvrir lors de cette session.

Logiciels

Mettez un peude CI/CD dans vos projets data !
Guillaume ROUCHON

www.azug.fr
© 2018 AZUG FR. All Rights Reserved.
2
Meet the Team
MVP Visual Studio ALM
Guillaume ROUCHON
Software Architect @ALDAutomotive
@grouchon

www.azug.fr
© 2018 AZUG FR. All Rights Reserved.
3
Intégration Continue ?
« L'intégration continue est un ensemble de pratiques utilisées en génie logiciel consistant à vérifier à chaque
modification de code source que le résultat des modifications ne produit pas de régression dans l'application
développée. »
source : wikipedia.fr
Ce qu’il faut retenir
• Gestion de sources
• Compilation
• Validation
• Packaging
• Automatisation

www.azug.fr
© 2018 AZUG FR. All Rights Reserved.
4
Déploiement Continu ?
« La livraison continue est une approche d’ingénierie logicielle dans laquelle les équipes produisent des logiciels
dans des cycles courts, ce qui permet de le mettre à disposition à n’importe quel moment. Le but est de
construire, tester et diffuser un logiciel plus rapidement. »
source : wikipedia.fr
Ce qu’il faut retenir
• Gestion des environnements
• Package
• Automatisation

www.azug.fr
© 2018 AZUG FR. All Rights Reserved.
5
Bases de données
Problèmes
• Schémas & données
• Mise à jour par transition et non par état
• Pas de culture gestion de source
Solutions
• Gestion de sources
• Scripts manuels de transition
• Journal des scripts exécutés
• Scripts d’expansion et de contraction

www.azug.fr
© 2018 AZUG FR. All Rights Reserved.
6
DEMO !
Bases de données

www.azug.fr
© 2018 AZUG FR. All Rights Reserved.
7
ETL
Problèmes
• Format source peu adapté à la gestion de sources
• Outils de déploiement non adapté
• Pas d’outils de tests
Solutions
• Gestion de sources du pauvre
• Automatiser au mieux
• Génération de sources

www.azug.fr
© 2018 AZUG FR. All Rights Reserved.
8
DEMO !
Data Factory

www.azug.fr
© 2018 AZUG FR. All Rights Reserved.
9
Analysis Services (tabular)
Problèmes
• Outils de déploiement non adapté
• Pas d’outil de tests
Solutions
• Gestion de sources
• Automatiser au mieux
• Tests “manuels”

www.azug.fr
© 2018 AZUG FR. All Rights Reserved.
10
DEMO !
Analysis Services

www.azug.fr
© 2018 AZUG FR. All Rights Reserved.
11
Merci à nos sponsors
PLATINUM
LOCAUX
PARTENAIRES MEDIA

www.azug.fr
© 2018 AZUG FR. All Rights Reserved.
12
Sponsors internationaux

www.azug.fr
© 2018 AZUG FR. All Rights Reserved.
13
Nous suivre
Facebook
facebook.com/groups/azugfr/
Twitter
twitter.com/AZUGFR
Meetup
meetup.com/AZUG-FR/
LinkedIn
https://www.linkedin.com/groups/8315615
Web
www.azug.fr

www.azug.fr
© 2018 AZUG FR. All Rights Reserved.
14
Questions ?

Recommandé

Mettez un peu de CI/CD dans vos projets data !

Guillaume Rouchon

[devops REX 2016] DevOps at Scale : ce qu’on fait, ce que l’on a appris chez ...

devops REX

Adrien Blind et Laurent Dussault, Société Générale @ devops REX 2016 Dans le cadre d’une grande démarche de transformation Continuous Delivery, nous avons contextualisé et deployé un triptyque de pratiques complémentaires Agile, Craftsmanship et DevOps. Mise en lumière d’un « double mur de la confusion », organisation d’ateliers de sensibilisation, coaching de proximité, convergence des objectifs des équipes Devs et Ops, construction d’une plateforme automatisée de delivery (jira, github, puppet, docker, « apification » de l’infrastructure)… : dans cette session, 2 coaches DevOps vous proposent un focus sur les accompagnements apportés sur le terrain.

[devops REX 2017] Les unconférences au cœur de l’évangelisation DevOps chez C...

devops REX

DevOps est né sur une problématique simple d’un manque de culture/partage dans une entreprise et surtout entre le monde des développeurs et celui des équipes d’opérations. Maintenant que tout devient programmable et que le monde des technologies avance très vite, ce fossé s’applique entre toutes les fonctions de l’entreprise. Il met également en avant qu’il n’est pas facile de passer dans le monde du logiciel sans maîtriser les bonnes pratiques du développement d’application moderne. Cela fait plusieurs années que Cisco a initié sa transformation du matériel/réseau vers le logiciel. Je vous propose un retour d’expérience sur les 4 dernières années passées chez Cisco à évangéliser DevOps via la gestion d’une communauté, l’organisation d’unconférences et le partage des bonnes pratiques pour finir sur un exemple de projet Open Source illustrant la partie continuous integration/delivery/deployment/documentation.

[devops REX 2017] Oser ralentir pour aller plus vite, histoire d’une révoluti...

devops REX

Lors de ce talk, nous vous expliquerons la démarche mise en œuvre à la DSI BSCC de La Poste pour lancer un chantier de transformation DevOps. Partant d'une situation ou l'automatisation -à travers la constitution d’un cloud privé sous Openshift- était passée avant l'axe collaboratif, nous avons tout d'abord constitué un groupe de travail qui a posé les bases d'une vision DevOps. Nous avons ensuite fait intervenir des coachs pour nous aider à mesurer l’écart entre nos pratiques et cette vision, notamment en interviewant les différents acteurs de la chaîne de création de valeur. Puis a commencé la phase de diffusion de l'information, avec des Mooc autour de l'Agilité et du DevOps, mais surtout un "DevOps Tour" qui nous aura permis d'établir avec les différents sites Dev et Ops un futur préféré pour la mise en œuvre de DevOps. Nous en sommes maintenant rendus à la phase de déploiement, et nous faisons une nouvelle tournée des sites pour un "bootcamp" au cours duquel nous échangeons sur les retours des premiers projets apprenants et nous adressons par des ateliers d'intelligence collective les questions pratiques qui émergent sur la déclinaison opérationnelle du DevOps.

Du cycle en V à DevOps, en passant par agile - Normation

RUDDER

Soirée du Test Logiciel - Impact de l’agile sur l’organisation des équipes de...

TelecomValley

devops REX 2018 - Faire du DevOps dans une relation contractuelle et commerci...

devops REX

Talk donné lors de devops REX 2018, la conférence devops 100% retours d'expériences - http://www.devopsrex.fr Speakers : Ludovic PIOT Entreprise : SOAT Au-delà des outils et des automatismes, le DevOps est avant tout une affaire de culture, de collaboration et de partage de responsabilité. Tout cela est très bien, mais comment gérer un RACI dans ce contexte ? Pire ! Comment faire entrer une relation contractuelle et commerciale entre un client (Dev) et un fournisseur (Ops) dans ce nouveau monde ? Retours de 2 ans d’expérience sur le sujet du responsable DevOps d’un infogérant parisien. Et quels sont les next steps dans cette relation ?

Méthodes agiles, frameworks javascript: optimisez votre time to market

michael_bailly

Recommandé

Mettez un peu de CI/CD dans vos projets data !

Guillaume Rouchon

[devops REX 2016] DevOps at Scale : ce qu’on fait, ce que l’on a appris chez ...

devops REX

[devops REX 2017] Les unconférences au cœur de l’évangelisation DevOps chez C...

devops REX

[devops REX 2017] Oser ralentir pour aller plus vite, histoire d’une révoluti...

devops REX

Du cycle en V à DevOps, en passant par agile - Normation

RUDDER

Soirée du Test Logiciel - Impact de l’agile sur l’organisation des équipes de...

TelecomValley

devops REX 2018 - Faire du DevOps dans une relation contractuelle et commerci...

devops REX

Méthodes agiles, frameworks javascript: optimisez votre time to market

michael_bailly

qualimétrie logiciel - Entreprise Software Analytic - nov 2015

Julien Vq

AT2010 Mise place d'un projet Agile

Normandy JUG

Agile Tour 2010 - Mise en place d'un projet agile

Laurent Deséchalliers

Industrialisation des développements logiciels

Sylvain Leroy

Usine Logicielle 2013

Stéphane Liétard

Solution Linux 2012 : Utilisateurs du Libre ne restez pas dans votre coin

Anne Nicolas

L’informatique efficience

Michel Bruchet

Accélérez itSMF 2013itSMF France

Cours Devops Sparks.pptx.pdf

boulonvert

Testez en continu avec le Cloud ou "Comment réduire le TTM et le coût de l’...

Pierre-Henri Gache

L’objectif de cette présentation est de présenter la solution mise en œuvre pour déployer à l’échelle de la DSI Axa France (2200 collaborateurs) l’automatisation des tests dans notre plateforme d’intégration continue en s’appuyant sur la solution Azure DevTest Lab. La solution mise en œuvre permet la création d’une machine d’exécution, d’exécuter les tests, de récupérer les résultats dans le gestionnaire de test et de supprimer la machine. Cela permet de lancer des tests en parallèle et d’en accélérer l’exécution, et génère des gains significatifs compte tenu du paiement à l’usage. Cette solution s’intègre complètement dans la démarche agile et devops, mise en œuvre au sein de la DSI depuis 2017.

Acquia et Arte : Drupal Camp Paris 2013

Cyril Reinhard

L'HÉBERGEMENT DANS LE CLOUD D'UNE PARTIE DES PLATEFORMES WEB ARTE AVEC ACQUIA Pascal Thuet Chef de Projet Secteur Nouvelles Technologie ARTE Cyril Reinhard Regional Director Acquia Twitter : @cyrilCR Nouvelle plateforme éditoriale et de débats d'ARTE • Destinée à tous les sujets d'aujourd'hui qui feront le monde de demain o Environnement o Sciences o Société o Economie • 3 types majeurs de contenus : o Vidéos o Textes & analyses o Infographies interactives

Open XKE - Introduire le Continuous Delivery dans votre entreprise par Jean-L...Publicis Sapient Engineering

Enib cours c.a.i. web - séance #6 : autour de la webappHoracio Gonzalez

Devops chez Voyages-Sncf.com

antony_guilloteau

Agilité et Logiciels libres même combat ?

keurvet

Arte utilise Acquia Cloud pour héberger ses plateformes web

Acquia

Introduction à DevOps

Microsoft

Le monde de l'informatique est divisé depuis toujours en deux univers : les personnes qui créent (Dev) et celles qui exploitent en production (Ops). Cette séparation peut générer stress et frustration. Les équipes n'ont pas l'impression d'aller dans le même sens et cela nuit à la productivité. Pour les réconcilier, un ensemble de pratiques et d'outils ont été imaginées: elles se cachent derrière le terme DevOps. Qu'est-ce que c'est exactement ? Quels problèmes est-ce que cela résout ? Quelle est la bonne approche pour le mettre en place? Nous vous proposons de découvrir notre vision sur ce sujet lors de cette session d'introduction.

Equipes de production ITIL, équipes de développement Agile : Comment bien tra...

Goood!

Dev opsday case study

Radoine Douhou

Accéder au développement Dot.Net et Asp.Net

Frédéric Vandenbriele

I want my model to be deployed ! (another story of MLOps)

GAB 2018 PARIS - Mettez un peu de CI/CD dans vos projets data! par Guillaume Rouchon

Recommandé

Recommandé

Contenu connexe

Similaire à GAB 2018 PARIS - Mettez un peu de CI/CD dans vos projets data! par Guillaume Rouchon

Similaire à GAB 2018 PARIS - Mettez un peu de CI/CD dans vos projets data! par Guillaume Rouchon (20)

Plus de AZUG FR

Plus de AZUG FR (20)

GAB 2018 PARIS - Mettez un peu de CI/CD dans vos projets data! par Guillaume Rouchon