&
FÉLIX-ANTOINE
BOURBONNAIS
B.ING., M.SC., PSM
v. 2016-07
Les tests et la qualité:
moteur de productivité
PASCAL ROY
ING.,...
Selon-vous, combien coûte 1
heure de non disponibilité
pour Amazon ?
2
3Image de Eyesplash
http://commons.wikimedia.org/wiki/File:Welkom_willkommen_Welcome_Bienvenue_Benvenuto.jpg
4 4
Qui sommes-nous ?
Pascal Roy
Ing., PSM, CSM, PMP
Félix-Antoine Bourbonnais
B.ing., PSM, M.Sc.
5
Formations Accompagnement Diagnostics Conférences
6
> AGILECoachs
Mentors
Formateurs
Tech.
ÉQUIPE
GestionTDD
Architecture
évolutive
Essais
automatisés
DDD
…
Scrum
QA Agile
...
LA PROMESSE DE L’AGILITÉ
7
Procurer de la valeur au client
à un rythme soutenable
en maximisant les boucles de rétroaction
permettant de livrer fréqu...
[…] Microsoft reported on a companywide
initiative to get agile. 85% of every
development dollar was spent on
fixing bugs ...
[…] “reinvent productivity” in a
“mobile-first and cloud-first
world.”
-- Satya Nadella, CEO Microsoft
http://blogs.wsj.co...
Microsoft will likely integrate teams
of quality assurance testers with
software developers to accelerate its
programming ...
LES PROBLÈMES COURANTS
14
15
Les équipes d’assurance qualité
peinent à suivre
15
Sprint 1 Sprint 2 Sprint 3
Fonction 1
DONE + DONE ??
Fonction 1
DON...
16
Dérangement et « Rush »
16
Sprint 2
?
[DEV] Fonction 2
[QA] Fonction 1
Régression
VITE VITE !
Intégration
F1 + F2
Geler...
17
Les tests de régressions….
18
Allonger le Sprint ??
19
Sélectionner les tests en fonction
du niveau de risque ?
UN CONSTAT
20
Mission: Innover
6 000 développeurs
>1 500 projets
>20 changements/minute
50% du code change tous les mois
Présentation: h...
Plus un problème est
découvert tard,
plus il coûte cher…
La boucle de rétroaction…
22
Quelques statistiques
23
Selon Google…
http://bit.ly/cXU02R 24
Google et les tests
Statistiques
7 500 000 suites/jour
120 000 000 tests/jour
65 000 « builds »/jour
5000+ CPUs
50TB mem
C...
26
Changement
culturel
« Si ça n’a pas besoin de fonctionner… alors ça
peut entrer dans n’importe quelle
planification. »
-- Kent Beck
http://twi...
28
La qualité est intégrée à
chaque seconde
29
Changement fondamental d’approche
29
Contrôle de la qualité Assurance qualité
Tests: Dernière ligne de défense
contre l...
30
L’assurance qualité…
… n’est pas un coût mais un
moteur essentiel pour
maintenir
la productivité !
31
Changement
organisationnel
32
La qualité logicielle est
l'affaire de TOUS !
« The burden of quality is on the shoulders of
those writing the code. Quality is never “some
tester’s” problem. »
« Quali...
34
Responsabilité!
35-- James A. Whittaker, How Google Tests Software
C’est l’affaire de tous !
35
36
La qualité effective englobe
toute l’organisation…
37
Changement
organisationnel
38
Équipe d’assurance qualité
selon Google…
38
Testeurs
Engineering
Productivity
Selon nous…
Point tournant !
Collaborateu...
« Quality is achieved by putting development
and testing into a blender and mixing them
until one is indistinguishable fro...
40
Les « QA »
dans un équipe séparée?
Cela ne remet cependant pas en question les
aptitudes particulières, voire les rôles…
41
Le rôle du “QA” est d’aider
l’équipe à faire de meilleurs
tests et à assurer la qualité
en continue.
Le rôle du “QA”
42
Confiance !
44
Changement
technique
Automatisation des tests
45
Selon nous…
Essentiel
Qui aime ça faire des
tests manuels?
46
• Réduire la pression sur
l’assurance qualité
• Réduire la longueur des boucles
de rétroaction
• Réduire l’attente
• Évite...
Attention de ne pas
arrêter la chaîne de
valeur!
Attention au Big Bang !
48
Intégration continue
https://www.otreva.com/blog/continuous-integration-build-status-board-bamboo-jenkins/ 49
Selon nous…
...
Vous voulez aller plus loin?
50
Déploiement continu…
DevOps
Développement ----->|<------ Opérations
Rappelez-vous de ce mot!
51
52
DANGER !
Changement
technique
Pourquoi certains efforts
d’automatisation échouent?
53
Fragilité !
Image par Gamma-Ray Productions sur Flickr
La fragilité des test…
54
Danger!
On ne rigole pas…
55Pourcentages selon Google.
La pyramide !
55
Bout
en bout
Service
Unitaire
% du portfolio
de tests Large
(L)
Moyen
(M)
Pe...
« Small tests lead to code quality.
Medium and large lead to product
quality »
-- James A. Whittaker, How Google Tests Sof...
Un test est une sonde!
Placez-la judicieusement…
58
Changement de
ses pratiques
Le bon produit?
http://www.coolthings.com/pic-nic-pants/ 59
Image de Patrick Bell from Haddonfield, NJ, USA - new 6-5-06 064 60
C’est quoi le problème ?
Il faut changer la manière dont nous faisons
l’analyse et la spécification des besoins…
Pour produire de la qualité intégr...
62
Une « Story » est une
promesse de conversation
Rappelons-nous…
63
Les 3 Amigos
Affaires
(PO)
Tests / QA
Développement &
opérations
64
Les critères d’acceptation…
Behaviour-Driven Development (BDD) is a
collaborative approach to software
development that bridges the
communication gap ...
Découvrir Spécifier Piloter
BDD :
Behavior-Driven Development
66
67
BDD
Les ingrédients
BDD
+
=
Spécification par
l’exemple1
Automatisation des
scénarios en tests2
Conversations∀
QUELQUES DERNIERS CONSEILS
68
Source: http://ennova.com.au/blog/2011/05/agile-test-strategy 69
Avoir une
stratégie de test
TDD
Code Reviews
Architecture flexible
Réusinage
Préparer pour l’automatisation
70
• Valoriser et envoyer un message viral
• Responsabilisation
• Stratégie de tests
• Collaboration PO / QA / DEV
• Gérer le...
72
Vous travaillez avec des humains…
impliquez-les dès le début!
73 73
Merci !
74
Merci Notre site
elapsetech.com
Notre blogue
developpementagile.com
Twitter
@fbourbonnais | @elapsetech
Nos courriels
f...
Prochain SlideShare
Chargement dans…5
×

Les tests et la qualité: moteur de productivité (v.2016-07)

1 456 vues

Publié le

Comment transformer la qualité, les tests et le déploiement en moteur de productivité plutôt qu’en simple poste de dépenses?

Portés par Lean et Agile, de grands acteurs (ex.: Google) ont transformé leur département d’assurance qualité pour le placer au coeur du processus de production!

Limitez les tests réalisés après l’itération et diminuez la pression sur votre équipe qualité.

Publié dans : Technologie

Les tests et la qualité: moteur de productivité (v.2016-07)

  1. 1. & FÉLIX-ANTOINE BOURBONNAIS B.ING., M.SC., PSM v. 2016-07 Les tests et la qualité: moteur de productivité PASCAL ROY ING., CSM, PSM, PMP
  2. 2. Selon-vous, combien coûte 1 heure de non disponibilité pour Amazon ? 2
  3. 3. 3Image de Eyesplash http://commons.wikimedia.org/wiki/File:Welkom_willkommen_Welcome_Bienvenue_Benvenuto.jpg
  4. 4. 4 4 Qui sommes-nous ? Pascal Roy Ing., PSM, CSM, PMP Félix-Antoine Bourbonnais B.ing., PSM, M.Sc.
  5. 5. 5 Formations Accompagnement Diagnostics Conférences
  6. 6. 6 > AGILECoachs Mentors Formateurs Tech. ÉQUIPE GestionTDD Architecture évolutive Essais automatisés DDD … Scrum QA Agile … Gestion de projets Agilité BDD > Nous sommes >
  7. 7. LA PROMESSE DE L’AGILITÉ 7
  8. 8. Procurer de la valeur au client à un rythme soutenable en maximisant les boucles de rétroaction permettant de livrer fréquemment du logiciel fonctionnel La promesse du développement Agile 8
  9. 9. […] Microsoft reported on a companywide initiative to get agile. 85% of every development dollar was spent on fixing bugs in the non agile groups of over 20,000 developers -- Jeff Sutherland http://blogs.wsj.com/cio/2014/07/15/microsoft-plots-agile-development-course-as-talk-on-job-cuts-loom/ http://scrum.jeffsutherland.com/2014/07/agile-means-get-rid-of-test-teams.html Microsoft L’assurance qualité au centre de la productivité 9 Pour chaque dollar, quel % est utilisé à régler des bogues ?!?
  10. 10. […] “reinvent productivity” in a “mobile-first and cloud-first world.” -- Satya Nadella, CEO Microsoft http://blogs.wsj.com/cio/2014/07/15/microsoft-plots-agile-development-course-as-talk-on-job-cuts-loom/ http://scrum.jeffsutherland.com/2014/07/agile-means-get-rid-of-test-teams.html Microsoft L’Agilité pour répondre aux défis modernes 10
  11. 11. Microsoft will likely integrate teams of quality assurance testers with software developers to accelerate its programming processes. -- Al Hilwa, IDC analyst and Microsoft from 2000 until 2007 http://blogs.wsj.com/cio/2014/07/15/microsoft-plots-agile-development-course-as-talk-on-job-cuts-loom/ http://scrum.jeffsutherland.com/2014/07/agile-means-get-rid-of-test-teams.html Microsoft L’assurance qualité au centre de la productivité 11
  12. 12. LES PROBLÈMES COURANTS 14
  13. 13. 15 Les équipes d’assurance qualité peinent à suivre 15 Sprint 1 Sprint 2 Sprint 3 Fonction 1 DONE + DONE ?? Fonction 1 DONE + DONE ! [DEV] Fonction 1 [DEV] Fonction 2 [QA] Fonction 1 [QA] Fonction 2 Véritable itération !
  14. 14. 16 Dérangement et « Rush » 16 Sprint 2 ? [DEV] Fonction 2 [QA] Fonction 1 Régression VITE VITE ! Intégration F1 + F2 Geler le code ?? Merge et branche ?? Dérangement et frustration !
  15. 15. 17 Les tests de régressions….
  16. 16. 18 Allonger le Sprint ??
  17. 17. 19 Sélectionner les tests en fonction du niveau de risque ?
  18. 18. UN CONSTAT 20
  19. 19. Mission: Innover 6 000 développeurs >1 500 projets >20 changements/minute 50% du code change tous les mois Présentation: http://bit.ly/cXU02R Article: http://bit.ly/138kE43 Google et les tests 21
  20. 20. Plus un problème est découvert tard, plus il coûte cher… La boucle de rétroaction… 22
  21. 21. Quelques statistiques 23
  22. 22. Selon Google… http://bit.ly/cXU02R 24
  23. 23. Google et les tests Statistiques 7 500 000 suites/jour 120 000 000 tests/jour 65 000 « builds »/jour 5000+ CPUs 50TB mem Coût et bénéfices Coût: $260 000 000 $/an Sauve: 420 000 000 $/an Bénéfice : ~160 000 000 $/an 25
  24. 24. 26 Changement culturel
  25. 25. « Si ça n’a pas besoin de fonctionner… alors ça peut entrer dans n’importe quelle planification. » -- Kent Beck http://twitter.com/unclebobmartin/status/375714854679883777 Petite réflexion 27
  26. 26. 28 La qualité est intégrée à chaque seconde
  27. 27. 29 Changement fondamental d’approche 29 Contrôle de la qualité Assurance qualité Tests: Dernière ligne de défense contre les défauts Processus intégrant la qualité afin de ne pas produire de défauts
  28. 28. 30 L’assurance qualité… … n’est pas un coût mais un moteur essentiel pour maintenir la productivité !
  29. 29. 31 Changement organisationnel
  30. 30. 32 La qualité logicielle est l'affaire de TOUS !
  31. 31. « The burden of quality is on the shoulders of those writing the code. Quality is never “some tester’s” problem. » « Quality is a development issue, not a testing issue ». -- James A. Whittaker, How Google Tests Software C’est l’affaire de tous ! 33
  32. 32. 34 Responsabilité!
  33. 33. 35-- James A. Whittaker, How Google Tests Software C’est l’affaire de tous ! 35
  34. 34. 36 La qualité effective englobe toute l’organisation…
  35. 35. 37 Changement organisationnel
  36. 36. 38 Équipe d’assurance qualité selon Google… 38 Testeurs Engineering Productivity Selon nous… Point tournant ! Collaborateurs et coachs
  37. 37. « Quality is achieved by putting development and testing into a blender and mixing them until one is indistinguishable from the other ». -- James A. Whittaker, How Google Tests Software Google : atteindre la qualité 39
  38. 38. 40 Les « QA » dans un équipe séparée? Cela ne remet cependant pas en question les aptitudes particulières, voire les rôles…
  39. 39. 41 Le rôle du “QA” est d’aider l’équipe à faire de meilleurs tests et à assurer la qualité en continue. Le rôle du “QA”
  40. 40. 42 Confiance !
  41. 41. 44 Changement technique
  42. 42. Automatisation des tests 45 Selon nous… Essentiel
  43. 43. Qui aime ça faire des tests manuels? 46
  44. 44. • Réduire la pression sur l’assurance qualité • Réduire la longueur des boucles de rétroaction • Réduire l’attente • Éviter de sélectionner la « régression » selon le risque Objectifs 47 Confiance !
  45. 45. Attention de ne pas arrêter la chaîne de valeur! Attention au Big Bang ! 48
  46. 46. Intégration continue https://www.otreva.com/blog/continuous-integration-build-status-board-bamboo-jenkins/ 49 Selon nous… Essentiel
  47. 47. Vous voulez aller plus loin? 50 Déploiement continu…
  48. 48. DevOps Développement ----->|<------ Opérations Rappelez-vous de ce mot! 51
  49. 49. 52 DANGER ! Changement technique
  50. 50. Pourquoi certains efforts d’automatisation échouent? 53
  51. 51. Fragilité ! Image par Gamma-Ray Productions sur Flickr La fragilité des test… 54 Danger! On ne rigole pas…
  52. 52. 55Pourcentages selon Google. La pyramide ! 55 Bout en bout Service Unitaire % du portfolio de tests Large (L) Moyen (M) Petit (S) ~10% ~20% ~70%
  53. 53. « Small tests lead to code quality. Medium and large lead to product quality » -- James A. Whittaker, How Google Tests Software 56
  54. 54. Un test est une sonde! Placez-la judicieusement…
  55. 55. 58 Changement de ses pratiques
  56. 56. Le bon produit? http://www.coolthings.com/pic-nic-pants/ 59
  57. 57. Image de Patrick Bell from Haddonfield, NJ, USA - new 6-5-06 064 60 C’est quoi le problème ?
  58. 58. Il faut changer la manière dont nous faisons l’analyse et la spécification des besoins… Pour produire de la qualité intégrale… 61
  59. 59. 62 Une « Story » est une promesse de conversation Rappelons-nous…
  60. 60. 63 Les 3 Amigos Affaires (PO) Tests / QA Développement & opérations
  61. 61. 64 Les critères d’acceptation…
  62. 62. Behaviour-Driven Development (BDD) is a collaborative approach to software development that bridges the communication gap between business and IT. -- BDD in the Finance Sector, https://cucumber.io/blog/2015/07/01/bdd-in-the-financial-sector BDD 65
  63. 63. Découvrir Spécifier Piloter BDD : Behavior-Driven Development 66
  64. 64. 67 BDD Les ingrédients BDD + = Spécification par l’exemple1 Automatisation des scénarios en tests2 Conversations∀
  65. 65. QUELQUES DERNIERS CONSEILS 68
  66. 66. Source: http://ennova.com.au/blog/2011/05/agile-test-strategy 69 Avoir une stratégie de test
  67. 67. TDD Code Reviews Architecture flexible Réusinage Préparer pour l’automatisation 70
  68. 68. • Valoriser et envoyer un message viral • Responsabilisation • Stratégie de tests • Collaboration PO / QA / DEV • Gérer les attentes • Étape par étape... Autres considérations 71
  69. 69. 72 Vous travaillez avec des humains… impliquez-les dès le début!
  70. 70. 73 73 Merci !
  71. 71. 74 Merci Notre site elapsetech.com Notre blogue developpementagile.com Twitter @fbourbonnais | @elapsetech Nos courriels fbourbonnais@elapsetech.com pascalroy@elapsetech.com Nos LinkedIn linkedin.com/in/fbourbonnais/fr ca.linkedin.com/in/roypa conferences.elapsetech.com Diapositives Nos présentations, chez vous!

×