Le document présente les principes du Lean Startup et des métriques clés pour évaluer le succès d'un projet, comme le modèle AARRR (Acquisition, Activation, Retention, Referral, Revenue). Il insiste sur l'importance de mesurer des données significatives plutôt que des métriques de vanité. Enfin, il mentionne des outils comme Google Analytics et StatsD pour la collecte et la visualisation des données.

1. Tout a fonctionné
du premier coup
Personne, jamais.
“

2. La mesure, ce n’est pas
que pour le devops
Forum PHP Paris 2014
Olivier Garcia, Patrick Allaert

3. Olivier Garcia
● CEO de catchy.io
● Co-créateur de www.psychologue.pro
● Co-organisateur de l’Agile Tour à Lille (Le 18/11, venez nombreux !)
● @0livier
● olivier@catchy.io
● olivier@lol.cat

4. Patrick Allaert
● CTO de catchy.io
● Travaille avec PHP/Linux depuis '98
● Auteur de l'extension PHP APM
● @patrick_allaert
● patrick@catchy.io
● patrickallaert@php.net

5. Geek + Garage + ? = Profit

6. Quit $EDITOR : Get out of the building

12. Hi, I’m Eric Ries.
J’ai formalisé
le Lean Startup

13. Lean Startup, basée sur le Lean/Toyotisme
● Production par étape “Just In Time”
● Offre adaptée à la demande
● Focalisé sur la production de valeur
● Amélioration continue

14. Vous le faites déjà (en partie)
● Itérations sur un projet
● Interactions client pour mieux cerner le besoin
● Scoring des stories pour prioritiser
● Rétrospective

15. while(1) {Build(); Measure(); Learn();}

16. Mesurer ce qui importe
● Métriques AAA

17. Mesurer ce qui importe
● Métriques AAA
○ Actionable
○ Auditable
○ Accessible

18. Mesurer ce qui importe
● Métriques AAA
● Métriques de vanité

19. Vanité AAA

20. Vanité
● Nombre de lignes de code
AAA
● Ratio code mort

21. Vanité
● Nombre de lignes de code
● Followers sur Twitter
AAA
● Ratio code mort
● Interactions avec followers

22. Vanité
● Nombre de lignes de code
● Followers sur Twitter
● Nombre de visiteurs
AAA
● Ratio code mort
● Interactions avec followers
● Visiteurs qui s’inscrivent

23. Vanité
● Nombre de lignes de code
● Followers sur Twitter
● Nombre de visiteurs
● Utilisateurs
AAA
● Ratio code mort
● Interactions avec followers
● Visiteurs qui s’inscrivent
● Utilisateurs actifs / 6 mois

24. Bonnes pratiques
● Mesurez (absolument?) tout !
● Focalisez-vous sur des métriques en fonction
de l’avancement du projet / sa réussite

26. AARRR

27. AARRR

28. AARRR
A.cquisition Comment les utilisateurs viennent?

29. AARRR
A.cquisition Comment les utilisateurs viennent?
Exemple “site de recrutement des Chemins de Fer Belges”:
Une personne visite le site pendant plus de 2 minutes

30. AARRR
A.cquisition Comment les utilisateurs viennent?
A.ctivation Est-ce qu’ils s’enregistrent ?

31. AARRR
A.cquisition Comment les utilisateurs viennent?
A.ctivation Est-ce qu’ils s’enregistrent ?
Site de recrutement:
L’internaute complète son profil et postule pour un job.

32. AARRR
A.cquisition Comment les utilisateurs viennent?
A.ctivation Est-ce qu’ils s’enregistrent ?
R.etention Est-ce qu’ils reviennent/sont actifs?

33. AARRR
A.cquisition Comment les utilisateurs viennent?
A.ctivation Est-ce qu’ils s’enregistrent ?
R.etention Est-ce qu’ils reviennent/sont actifs?
Site de recrutement:
Les chercheurs d’emploi reviennent pour consulter de
nouveaux jobs.

34. AARRR
A.cquisition Comment les utilisateurs viennent?
A.ctivation Est-ce qu’ils s’enregistrent ?
R.etention Est-ce qu’ils reviennent/sont actifs?
R.eferral Font-ils venir d’autres utilisateurs?

35. AARRR
A.cquisition Comment les utilisateurs viennent?
A.ctivation Est-ce qu’ils s’enregistrent ?
R.etention Est-ce qu’ils reviennent/sont actifs?
R.eferral Font-ils venir d’autres utilisateurs?
Site de recrutement:
1. Combien de personnes partagent-elles un job?
2. Combien de ces partages mènent-ils à une candidature?

36. AARRR
A.cquisition Comment les utilisateurs viennent?
A.ctivation Est-ce qu’ils s’enregistrent ?
R.etention Est-ce qu’ils reviennent/sont actifs?
R.eferral Font-ils venir d’autres utilisateurs?
R.evenu Quels impacts sur le €€€ ?

37. AARRR
A.cquisition Comment les utilisateurs viennent?
A.ctivation Est-ce qu’ils s’enregistrent ?
R.etention Est-ce qu’ils reviennent/sont actifs?
R.eferral Font-ils venir d’autres utilisateurs?
R.evenu Quels impacts sur le €€€ ?
Site de recrutement:
Combien de personnes ont-elles été engagées? … et ce pour plus de 6 mois?

38. Outils de récolte de métriques

39. Le plus connu?

40. Google Analytics

41. Google Analytics - Mise en place
<script>
(function (i,s,o,g,r,a,m){i['GoogleAnalyticsObject' ]=r;i[r]=i[r]||function (){
(i[r].q=i[r].q||[]).push(arguments )},i[r].l=1*new Date();a=s.createElement (o),
m=s.getElementsByTagName (o)[0];a.async=1;a.src=g;m.parentNode .insertBefore (a,m)
})(window,document ,'script' ,'//www.google-analytics.com/analytics.js' ,'ga');
ga('create' , 'UA-XXXX-Y' , 'auto'); // Creates a tracker.
ga('send', 'pageview' ); // Sends a pageview.
</script>

42. Google Analytics - Dashboards standards

47. Google Analytics - Surveiller des évènements

48. Google Analytics - Surveiller des évènements
ga('send', 'event', 'category', 'action');
ga('send', 'event', 'category', 'action', 'label');
ga('send', 'event', 'category', 'action', 'label', value); // value is a number.

49. Google Analytics - Surveiller des évènements
ga('send', 'event', 'user', 'register');
ga('send', 'event', 'category', 'action', 'label');
ga('send', 'event', 'category', 'action', 'label', value); // value is a number.

50. Google Analytics - Surveiller des évènements
ga('send', 'event', 'user', 'register');
ga('send', 'event', 'user', 'apply_job', 'job_123');
ga('send', 'event', 'category', 'action', 'label', value); // value is a number.

51. Google Analytics - Surveiller des évènements
ga('send', 'event', 'user', 'register');
ga('send', 'event', 'user', 'apply_job', 'job_123');
ga('send', 'event', 'user', 'share_job', 'job_123', 3); // value is a number.

53. Google Analytics
Créer des dashboards personnalisés: Embed API
Démo en ligne:
http://ga-dev-tools.appspot.com/demos/
https://github.com/googleanalytics/embed-api-demos

55. Google Analytics Query Explorer
http://ga-dev-tools.appspot.com/explorer/

57. Google Analytics Query Explorer

58. Google Analytics Query Explorer

59. Google Analytics Query Explorer

60. Google Analytics Query Explorer

62. Google Analytics Query Explorer

65. Google Analytics
Créer des dashboards personnalisés: Embed API
{
ids:
"ga:6172121",
dimensions:
"ga:date,ga:eventCategory",
metrics:
"ga:totalEvents",
filters:
"ga:eventCategory==Account creation",
start-date:
"2014-09-01",
end-date:
"2014-10-01"
}

66. Le plus en vogue?

67. StatsD + Graphite

68. StatsD + Graphite
Application

69. StatsD + Graphite
UDP
Application StatsD

70. StatsD + Graphite
UDP
Application StatsD

71. StatsD + Graphite
UDP
inc(login)
Application StatsD

72. StatsD + Graphite
UDP
inc(login) echo "login:1|c" |
Application StatsD
nc -w 1 -u graphite.
example.com 8125

73. StatsD + Graphite
UDP
inc(login)
inc(login)
Application StatsD

74. StatsD + Graphite
UDP
inc(login)
inc(login)
inc(register)
Application StatsD

75. StatsD + Graphite
UDP
inc(login)
inc(login)
inc(register)
duration(search,
Application StatsD
200ms)

76. StatsD + Graphite
UDP
inc(login)
inc(login)
inc(register)
duration(search,
Application StatsD
200ms)
inc(login)

77. StatsD + Graphite
UDP
inc(login)
inc(login)
inc(register)
duration(search,
Application StatsD
200ms)
inc(login)
duration(search,
300ms)

78. StatsD + Graphite
UDP
inc(login)
inc(login)
inc(register)
duration(search,
Application StatsD
200ms)
inc(login)
duration(search,
300ms)
duration(search,
100ms)

79. StatsD + Graphite
UDP
inc(login)
inc(login)
inc(register)
duration(search,
Application StatsD
200ms)
inc(login)
duration(search,
300ms)
duration(search,
100ms)
10 secondes:
inc(login, 3);
inc(register, 1);
duration( search, 3, {
min: 100,
max: 300,
avg: 200,
mean: 200
});

80. StatsD + Graphite
UDP
inc(login)
inc(login)
inc(register)
duration(search,
Application StatsD
200ms)
inc(login)
duration(search,
300ms)
duration(search,
100ms)
Graphite
TCP
10 secondes:
inc(login, 3);
inc(register, 1);
duration( search, 3, {
min: 100,
max: 300,
avg: 200,
mean: 200
});

81. StatsD + Graphite
Graphite

82. StatsD + Graphite
24h:
/10 secondes
Graphite

83. StatsD + Graphite
24h:
/10 secondes
2 semaines:
/1 minute
Graphite

84. StatsD + Graphite
24h:
/10 secondes
2 semaines:
/1 minute
Graphite
6 mois:
/10 minutes

85. StatsD + Graphite
24h:
/10 secondes
2 semaines:
/1 minute
Graphite
6 mois:
/10 minutes
5 ans:
/1 heure

86. StatsD + Graphite
24h:
/10 secondes
2 semaines:
/1 minute
Graphite
6 mois:
/10 minutes
5 ans:
/1 heure

87. Outils de visualisation Graphite
● Grafana
● Tessera
● Graphiti
● Giraffe
● Graphene
● … plus sur: http://graphite.readthedocs.
org/en/latest/tools.html#visualization

88. Grafana

89. Tessera

90. Et les autres…

91. Et les autres…
● Mixpanel
● Pirate Metrics
● KISSmetrics

92. En résumé
Le succès dépend d’un feedback mesurable.

93. En résumé
Le succès dépend d’un feedback mesurable.
LeanStartup et AARRR donnent des pistes
pour s’appuyer sur des métriques fiables.

94. En résumé
Le succès dépend d’un feedback mesurable.
LeanStartup et AARRR donnent des pistes
pour s’appuyer sur des métriques fiables.
Il existe des outils facilement intégrables en
PHP pour créer ces indicateurs.

95. Merci
https://joind.in/11937 http://lanyrd.com/sddybk

96. Credits
www.flickr.com/photos/kk (Lil’ pirates)
www.flickr.com/photos/betsyweber (Eric Ries)
www.flickr.com/photos/highersights (Listen...)
www.flickr.com/photos/75001512@N00/4228976596 (Geek)
www.flickr.com/photos/phobia (Fail Stamp)