Réussir ses tests A/B 
Anthony BREBION 
MeetupGrowthHacking -TheFamily 
2 décembre 2014
Cas d’école 
Quoi tester ? 
Au programme…
Methodologicalapproachto testing 
DiscoveredA/B testing 
Continousimprovements 
Test a lot 
Most A/B tests are bullshit 
C...
La conversion = processus complexe
Alimenter votre stratégie de testing 
Tester à l’aveugle 
Tester des éléments secondaires 
Identifier vos problèmes de con...
Construire une hypothèse de test 
Retirer le menu de navigation des pages de notre tunnel de commande, améliorera le taux ...
Étoffer votre boîte à outils
Données quanti et quali 
Insights 
Usabilitytesting 
Voice of customer 
Sales and call center 
Surveys 
Customer services ...
Collecter et analyser les données 
Formuler l’hypothèse de test 
Designer votre test 
Analyser les résultats 
Adoptez la b...
Une partie des résultats sont illusoires
Cas de figure fréquent 
Convergence des résultats
Fiabilité du test > 95% condition nécessaire mais pas suffisante
Taille de l’échantillon 
à calculer en amont du test
Taille de l’échantillon 
à calculer en amont du test
Taille de l’échantillon 
à calculer en amont du test
La durée du test est primordiale 
Quelle est la durée minimale ?
Représentativité de l’échantillon 
Sources de trafic, cycles business, device
Les solutions ? 
Faire durer le test et/ou le cibler
Testez avec peu de trafic
Testez des changements radicaux 
Soignez la phase préparatoire 
Limitez le nombre de variations 
Mesurez les micro-convers...
abtasty.com/ressources 
@ABTasty 
Pour en savoir plus
Q & A
Anthony BREBION 
anthony@abtasty.com 
www.abtasty.com 
@ABTasty 
Merci
Prochain SlideShare
Chargement dans…5
×

Comment réussir ses A/B Tests ?

1 808 vues

Publié le

Par Adrien Brebion, Head of Marketing at A/B Tasty

Inscrivez-vous au prochain meetup! — http://www.meetup.com/GrowthHackingParis
Inscrivez-vous à la newsletter pour ne pas rater les prochains évènements ! — http://www.thefamily.co/events/
Retrouvez les photos de l’évènement sur Facebook — http://buff.ly/1vJnKst
Suggestions, idées de speakers, feedbacks always welcome ! http://buff.ly/1CRdh0d

Comment réussir ses A/B Tests ?

  1. 1. Réussir ses tests A/B Anthony BREBION MeetupGrowthHacking -TheFamily 2 décembre 2014
  2. 2. Cas d’école Quoi tester ? Au programme…
  3. 3. Methodologicalapproachto testing DiscoveredA/B testing Continousimprovements Test a lot Most A/B tests are bullshit Courbe d’apprentissage…
  4. 4. La conversion = processus complexe
  5. 5. Alimenter votre stratégie de testing Tester à l’aveugle Tester des éléments secondaires Identifier vos problèmes de conversion Dégager des hypothèses «fortes» de tests
  6. 6. Construire une hypothèse de test Retirer le menu de navigation des pages de notre tunnel de commande, améliorera le taux de conversion de chaque étape car l’analyse des clics sur ces pages montre qu’une part importante des internautes quittent le tunnel en utilisant ces liens Réduire le nombre de pages dans le tunnel améliorera le taux de conversion
  7. 7. Étoffer votre boîte à outils
  8. 8. Données quanti et quali Insights Usabilitytesting Voice of customer Sales and call center Surveys Customer services Competitorevals Marketresearch Eye tracking Session replay Web analytics Searchanalytics Formsanalytics Social analytics A/B and MVT testing
  9. 9. Collecter et analyser les données Formuler l’hypothèse de test Designer votre test Analyser les résultats Adoptez la bonne méthodologie
  10. 10. Une partie des résultats sont illusoires
  11. 11. Cas de figure fréquent Convergence des résultats
  12. 12. Fiabilité du test > 95% condition nécessaire mais pas suffisante
  13. 13. Taille de l’échantillon à calculer en amont du test
  14. 14. Taille de l’échantillon à calculer en amont du test
  15. 15. Taille de l’échantillon à calculer en amont du test
  16. 16. La durée du test est primordiale Quelle est la durée minimale ?
  17. 17. Représentativité de l’échantillon Sources de trafic, cycles business, device
  18. 18. Les solutions ? Faire durer le test et/ou le cibler
  19. 19. Testez avec peu de trafic
  20. 20. Testez des changements radicaux Soignez la phase préparatoire Limitez le nombre de variations Mesurez les micro-conversions Suivez plusieurs indicateurs Menez plusieurs tests simultanément
  21. 21. abtasty.com/ressources @ABTasty Pour en savoir plus
  22. 22. Q & A
  23. 23. Anthony BREBION anthony@abtasty.com www.abtasty.com @ABTasty Merci

×