Syloé vous éclairera sur toutes vos interrogations relatives à un projet de Test de charge de vos applications Web.
Les différents types de tests de charge
Le test de performances
Le test aux limites
Méthode de mise en place
Pré-requis
Préparation des scénarios
Lancement du test de charge
Présentation de l'outil JMeter
Exemple de rapport
Appdays 2016 - Rétention : l'arme de croissance massive de MolotovLuc Behar
Quand on lance son app, il n'est pas toujours facile d'orchestrer les différents leviers du marketing . La thèse défendue ici est celle de 'faire un produit qu'on adore' avant de 'faire adorer le produit'. Cela conduit à une stricte séquence des messages, une focalisation sur l'activation et la rétention, de son audience cible, celle qui trouve de la valeur dans le produit proposé. Des exemples sont fournis pour illustrer la façon de procéder pour améliorer le produit et l'amener à un haut niveau de performance synonyme de croissance forte : beaucoup de bouche à oreille, audience solidement croissance, forte conversion et haute Life Time Value :)
Syloé vous éclairera sur toutes vos interrogations relatives à un projet de Test de charge de vos applications Web.
Les différents types de tests de charge
Le test de performances
Le test aux limites
Méthode de mise en place
Pré-requis
Préparation des scénarios
Lancement du test de charge
Présentation de l'outil JMeter
Exemple de rapport
Appdays 2016 - Rétention : l'arme de croissance massive de MolotovLuc Behar
Quand on lance son app, il n'est pas toujours facile d'orchestrer les différents leviers du marketing . La thèse défendue ici est celle de 'faire un produit qu'on adore' avant de 'faire adorer le produit'. Cela conduit à une stricte séquence des messages, une focalisation sur l'activation et la rétention, de son audience cible, celle qui trouve de la valeur dans le produit proposé. Des exemples sont fournis pour illustrer la façon de procéder pour améliorer le produit et l'amener à un haut niveau de performance synonyme de croissance forte : beaucoup de bouche à oreille, audience solidement croissance, forte conversion et haute Life Time Value :)
OBJECTIF QUALITÉ DIGITALE : Comment élaborer une bonne stratégie de test pou...StardustTesting
Webinar du 16/02/2016 animé par StarDust, spécialiste du Test et de l'Assurance Qualité (QA) pour les éditeurs de solutions digitales : "Comment élaborer une bonne stratégie de test ?"
PENSER TEST
> Connaître votre produit, connaître vos utilisateurs
> Tester tout au long du cycle de développement du produit
QUAND TESTER ?
> Cycle en V ?
> Cycle agile ?
QUOI TESTER ?
> Quels tests ?
> Quels terminaux ?
QUI TESTE ?
> Le développeur n'est pas testeur !
> Testeurs professionnels "in lab" / Freelance testeurs
COMMENT TESTER ?
> Tests manuels / Tests automatisés
> Quels outils ? Quels supports ? Quelles méthodologies ?
Le test dans un cycle agile. Comment faire ?Gilles Brieux
Développer un logiciel dans une démarche agile devrait amener à chaque itération un produit potentiellement livrable et utilisable par l’utilisateur final.
Tous les tests nécessaires avant livraison doivent donc être réalisés lors d’une même itération.
Contrairement à une démarche classique, cela implique plus de tests, tout le temps et en un temps réduit.
1/ Quels sont les différents types de tests en agilité ?
2/ Comment organiser cette activité cruciale dans une équipe agile ?
Les outils d’automatisation de tests (scripting) : Adoption et enjeux (comple...AQT-presentations
Les essais logiciels sont de plus en plus longs et complexes, les délais de plus en plus courts et les impacts d’une anomalie critiques. Les technologies de l’information sont partout, la qualité doit y être aussi. Cette présentation traite des bonnes pratiques à implémenter afin de réduire et d'éliminer ces enjeux présents dans vos processus d'entreprise. Vous en saurez plus sur l'importance d'automatiser, les défis du passage du manuel à l’automatisation et pourquoi les outils actuels n’offrent pas le ROI escompté. Une nouvelle démarche pour simplifier l’adoption et assurer le ROI vous sera aussi présentée.
Analyse du site : fait-religieux.com
Marketing, webmarketing, analyses de marché, production/rédaction de contenu media
Vos 10 premières actions marketing digital pour le Fait-Religieux.com pour doubler le trafic et le nombre d’abonnés payants.
Précisez les budgets, délais, et ROI.
Présentation de mes actions de communication au DBHBThomas Ormansay
Ce document présente un résumé de l'ensemble des actions de communication que j'ai pu effectuer en tant que Chargé de Communication du club de handball professionnel Dijonnais, le Dijon Bourgogne HandBall. Ce support m'a permis l'obtention de mon BTS Communication au lycée les Arcades.
Les 5 Tendances de la Performance Digitale en 2016Idean France
Pour créer un service digital puissant avec un véritable impact durable sur l'expérience utilisateur, il est essentiel d'en optimiser et surveiller la performance. Les nouvelles avancées en matière d'intelligence artificielle, analytiques et objets connectés vont permettre aux marques d'aller encore plus loin.
Quels seront les plus gros changements en 2016 ? Continuez à lire pour découvrir les 5 tendances de la performance digitale.
Objets connectés : Quel intérêt pour la santé ?Romain Callier
Nous sommes aujourd'hui au centre d'une vraie révolution technologique, notamment dans la santé, avec les objets connectés, la télémédecine et les programmes de suivi de patient. Mais qu'est-ce qu'est vraiment un objet connecté ? Ces objets ont-ils vraiment un intérêt pour la médecine ?
Ce powerpoint appartient à Mr Romain Callier, et ne peut être réutilisé qu'avec son accord. Les images contenues dans cette présentation n'appartiennent pas au propriétaire de cette présentation.
L'utilisation des réseaux sociaux par les clubs sportifs professionnels (lien...Flo Thion
(Lien pour télécharger le travail complet plus bas)
Un aperçu du mémoire de fin d'étude sur l'utilisation des réseaux sociaux par les clubs sportifs professionnels répondant à la problématique
"En quoi les sociaux sociaux sont ils devenus indispensables dans la communication des clubs sportifs professionnels ?"
Si le sujet vous intéresse et que vous voulez voir le travail complet vous pouvez le télécharger par là >>> https://bit.ly/2KEtZdF
Bon courage ;-)
Face à l'engouement des objets connectés par les professionnels mais à des ventes qui ne décollent pas, posons nous la question de savoir ce qu'attend le consommateur et comment il faudrait lui vendre un objet connecté. Le marché des objets connectés en France, où en est-on ? A quoi ressemble l'écosystème de distribution ? Comment vendre un objet connecté dans sa distribution et son positionnement ? Conquête, fidélisation et rétention.
OBJECTIF QUALITÉ DIGITALE : Comment élaborer une bonne stratégie de test pou...StardustTesting
Webinar du 16/02/2016 animé par StarDust, spécialiste du Test et de l'Assurance Qualité (QA) pour les éditeurs de solutions digitales : "Comment élaborer une bonne stratégie de test ?"
PENSER TEST
> Connaître votre produit, connaître vos utilisateurs
> Tester tout au long du cycle de développement du produit
QUAND TESTER ?
> Cycle en V ?
> Cycle agile ?
QUOI TESTER ?
> Quels tests ?
> Quels terminaux ?
QUI TESTE ?
> Le développeur n'est pas testeur !
> Testeurs professionnels "in lab" / Freelance testeurs
COMMENT TESTER ?
> Tests manuels / Tests automatisés
> Quels outils ? Quels supports ? Quelles méthodologies ?
Le test dans un cycle agile. Comment faire ?Gilles Brieux
Développer un logiciel dans une démarche agile devrait amener à chaque itération un produit potentiellement livrable et utilisable par l’utilisateur final.
Tous les tests nécessaires avant livraison doivent donc être réalisés lors d’une même itération.
Contrairement à une démarche classique, cela implique plus de tests, tout le temps et en un temps réduit.
1/ Quels sont les différents types de tests en agilité ?
2/ Comment organiser cette activité cruciale dans une équipe agile ?
Les outils d’automatisation de tests (scripting) : Adoption et enjeux (comple...AQT-presentations
Les essais logiciels sont de plus en plus longs et complexes, les délais de plus en plus courts et les impacts d’une anomalie critiques. Les technologies de l’information sont partout, la qualité doit y être aussi. Cette présentation traite des bonnes pratiques à implémenter afin de réduire et d'éliminer ces enjeux présents dans vos processus d'entreprise. Vous en saurez plus sur l'importance d'automatiser, les défis du passage du manuel à l’automatisation et pourquoi les outils actuels n’offrent pas le ROI escompté. Une nouvelle démarche pour simplifier l’adoption et assurer le ROI vous sera aussi présentée.
Analyse du site : fait-religieux.com
Marketing, webmarketing, analyses de marché, production/rédaction de contenu media
Vos 10 premières actions marketing digital pour le Fait-Religieux.com pour doubler le trafic et le nombre d’abonnés payants.
Précisez les budgets, délais, et ROI.
Présentation de mes actions de communication au DBHBThomas Ormansay
Ce document présente un résumé de l'ensemble des actions de communication que j'ai pu effectuer en tant que Chargé de Communication du club de handball professionnel Dijonnais, le Dijon Bourgogne HandBall. Ce support m'a permis l'obtention de mon BTS Communication au lycée les Arcades.
Les 5 Tendances de la Performance Digitale en 2016Idean France
Pour créer un service digital puissant avec un véritable impact durable sur l'expérience utilisateur, il est essentiel d'en optimiser et surveiller la performance. Les nouvelles avancées en matière d'intelligence artificielle, analytiques et objets connectés vont permettre aux marques d'aller encore plus loin.
Quels seront les plus gros changements en 2016 ? Continuez à lire pour découvrir les 5 tendances de la performance digitale.
Objets connectés : Quel intérêt pour la santé ?Romain Callier
Nous sommes aujourd'hui au centre d'une vraie révolution technologique, notamment dans la santé, avec les objets connectés, la télémédecine et les programmes de suivi de patient. Mais qu'est-ce qu'est vraiment un objet connecté ? Ces objets ont-ils vraiment un intérêt pour la médecine ?
Ce powerpoint appartient à Mr Romain Callier, et ne peut être réutilisé qu'avec son accord. Les images contenues dans cette présentation n'appartiennent pas au propriétaire de cette présentation.
L'utilisation des réseaux sociaux par les clubs sportifs professionnels (lien...Flo Thion
(Lien pour télécharger le travail complet plus bas)
Un aperçu du mémoire de fin d'étude sur l'utilisation des réseaux sociaux par les clubs sportifs professionnels répondant à la problématique
"En quoi les sociaux sociaux sont ils devenus indispensables dans la communication des clubs sportifs professionnels ?"
Si le sujet vous intéresse et que vous voulez voir le travail complet vous pouvez le télécharger par là >>> https://bit.ly/2KEtZdF
Bon courage ;-)
Face à l'engouement des objets connectés par les professionnels mais à des ventes qui ne décollent pas, posons nous la question de savoir ce qu'attend le consommateur et comment il faudrait lui vendre un objet connecté. Le marché des objets connectés en France, où en est-on ? A quoi ressemble l'écosystème de distribution ? Comment vendre un objet connecté dans sa distribution et son positionnement ? Conquête, fidélisation et rétention.
résultats du baromètre annuel sur le contenu digital :
Stratégie digitale et contenu = site + réseaux sociaux + newsletter et emailing
Indispensable au succès de toute stratégie digitale
Du texte avant tout mais aussi de la vidéo et de la photo
Un facteur d’engagement et de conquête commerciale
Des efforts budgétaires constants et pérennes
Des outils et moyens de plus en plus présents
Un recours complémentaire à des prestataires pour la production
E-transformation des stades arenas et spectacles sportifs - MBA MCIGuillaume Fischer
Présentation / conférence sur l'e-transformation des stades arenas et spectacles sportifs, réalisée dans le cadre de la formation MBA MCI (Marketing et Commerce sur Internet) - Avril 2015 - Par Hugo Duffaut, Guillaume Fischer, Morgane Vergoz, Michel Rolland, Maxime Franck, Alexis Szlaga, Benjamin El Quali
De nombreuses transformations sont en cours dans l'écosystème du marketing digital. Mais quelles tendances surveiller de près ? Quels que soient vos enjeux pour 2016, nous vous livrons nos traditionnelles prédictions sur les stratégies-clés en Trafic, Brand Content, Social Media, e-Business ou Mobilité, avec un focus indispensable sur l'Internet des Objets.
Mémoire HEC Entrepreneurs - L'Entrepreneuriat dans le SportBlandine Freté
Mémoire de fin d'études - HEC Entrepreneurs : "L'Entrepreneuriat dans le Sport"
Question de recherche : "Comment les startups sportives permettent-elles de professionnaliser l'industrie du sport business français ?"
Blandine Freté & Caroline Laroche, 1er septembre 2014
Tuteur : Florian Grill
Optimiser son site grâce au testing A/B ou multivarié et au ciblageRaphaël Fétique
Pratique encore peu répandue en France, le testing reste l'apanage malheureusement des acteurs les plus matures - il devient indispensable à partir d'1 million d'euros de CA - alors que son coût le met à la portée de tous !
Plus que d’autres méthodes d’optimisations, le testing requiert une méthodologie stricte et rigoureuse pour pouvoir être utilisée efficacement.
Cette conférence a pour objectif de :
- Introduire le concept de testing ainsi que les différents types de tests : A/B, multivarié, ciblage
- Fournir les bases et la méthodologie pour se lancer sereinement dans une démarche de testing (choix des variantes, outils, méthodes statistiques, liens avec les solutions de webanalytics, organisation générale, ...)
- Présenter les best-practices ainsi que les principaux pièges à éviter
Par Adrien Brebion, Head of Marketing at A/B Tasty
Inscrivez-vous au prochain meetup! — http://www.meetup.com/GrowthHackingParis
Inscrivez-vous à la newsletter pour ne pas rater les prochains évènements ! — http://www.thefamily.co/events/
Retrouvez les photos de l’évènement sur Facebook — http://buff.ly/1vJnKst
Suggestions, idées de speakers, feedbacks always welcome ! http://buff.ly/1CRdh0d
[Webinar] Optimisez votre site en alliant Digital Analytics & A/B TestingAT Internet
En partenariat avec Optimizely.
Grâce à l’intégration « one-click » entre AT Internet et Optimizely, enrichissez les données de résultats de vos tests en temps réel en les combinant aux analyses de votre outil Digital Analytics.
Lors de ce webinar, découvrez comment, en un seul clic, vous obtenez de nouvelles analyses et opportunités d’étudier les performances de vos campagnes d’A/B testing.
Nos experts aborderont chaque étape de la mise en place « one click » de l’intégration AT Internet / Optimizely pour récupérer automatiquement les mesures des tests dans l’interface Analyzer d’AT Internet.
Grâce à de nombreux exemples et cas pratiques, découvrez comment ré-exploiter au maximum ces données de tests en les croisant avec d’autres données comportementales de votre audience online
Webinar de Philippe Yonnet, CEO du Groupe Neper sur l'AB testing SEO.
Comment effectuer des tests A/B pour vérifier l'impact des optimisations SEO en utilisant les bonnes méthodes statistiques pour y parvenir.
Optimisez votre site en alliant Web Analytics & A/B TestingOptimizely
Augmentez encore la performance de votre site grâce à l'interconnexion entre les outils AB Testing d'Optimizely et Web Analytics d'AT Internet.
- Pourquoi AT Internet est l'un des outils web analytics les plus utilisés
- Comment le A/B Testing s'exerce avec Optimizely
- Comment créer une vague de A/B Test en quelques minutes seulement
- Comment s'intègrent en un clic les plateformes AT internet et Optimizely
- Pourquoi centraliser, croiser les résultats des tests avec les données comportementales et enfin comment exploiter au mieux ces résultats
https://www.youtube.com/watch?v=F6izekOdyhM&feature=youtu.be
https://www.optimizely.fr
http://www.atinternet.com/
http://blog.optimizely.com/
Augmenter sa rentabilité grâce au test utilisateurJulien Dereumaux
Méthode de design UX bien trop peu exploitée, elle représente pourtant un moyen très efficace de sauvegarder ses ressources grâce à la participation des utilisateurs.
Pendant ce webinar j'expliquerai tout l'intérêt d'utiliser ce genre de méthode dans vos projets et quels bénéfices vous pouvez en retirer !
Présentation - Matinale TIC - Angers - Thibault Vincent - Optimisation de la ...ThibaultVincent
Ma présentation effectuée lors de la matinale Marketing et TIC à la Maison des Projets de Angers, le vendredi 28 février 2014.
Une présentation axée sur le split-testing et l'optimisation de la conversion.
Comment optimiser la conversion de vos sites en 2019 ?Mahdi MESBAHI
La conversion est l'objectif final d'une présence sur Internet. Comment mettre en place une stratégie de Conversion Rate Optimization (CRO) efficace en 2019 ? Voici les slides de ma conférence à l'Ecole Multimédia du 27/02/2019.
La qualité au service de vos projets digitaux ! Retour sur le PDJ co-organisé...Julie DULOT
En collaboration avec la société StarDust, nous avons organisé ce 1er Juin 2017, un petit-déjeuner sur le thème de la qualité au services de vos projets digitaux.
Cédric Milton (StarDust) & Jérôme Calais (Netvigie) sont intervenus afin d'expliquer comment un site fonctionnel et performant booste votre business.
Un grand merci à Guillaume Goureau, Responsable Développement Web chez Norauto pour son retour d'expérience quant à l'utilisation de nos outils.
Conférence de Philippe Yonnet, CEO de Neper, au SEO Campus 2021. Les split tests pour le SEO sont différents des tests A/B traditionnels sur plusieurs points, et font appel à des méthodes statistiques différentes
Bonnes pratiques #5 - Votre première application est en production. Et mainte...Bonitasoft
Ça y est ! Votre première itération d’application basée sur l’optimisation de vos processus est en production. Bravo, vous avez terminé le premier cycle avec succès.
Et ce n’est que le début: qu’allez-vous pouvoir faire maintenant? Plusieurs possibilités s’offrent à vous : ajouter un processus, améliorer ce que vous avez implémenté, optimiser ou industrialiser la mise en production de vos applications.
Tant de choses restent à faire, mais comment?
video: https://www.youtube.com/watch?v=BypkkvAtxKE
Le pilotage des développements par les tests d’acceptation reste un problème difficile à maîtriser dans les projets agiles. D’une part, il est compliqué d’impliquer les analystes métier dans la réalisation de scripts de tests automatisés, et d’autre part les tests de hauts niveaux qu’ils peuvent produire sont souvent difficiles à maintenir et automatiser.
L’approche proposée, supportée par une plate-forme appelée Zest, associe la définition des scénarios de tests d’acceptation sur la base d’un DSL (Domain-Specific Language) construit incrémentalement avec des mots d’action, et des fonctions de refactoring qui permettent en permanence d’optimiser les scénarios pour en faciliter l’automatisation et leur maintenance.
SEO / UX / CRO - De l’intention à la conversion par iProspect, Testapic et A/...iProspect France
Le 6 avril 2017, iProspect, AB Tasty et Testapic ont organisé à Paris Pionnières un événement autour de l’optimisation des conversions sur site web et mobile, en détaillant le cas de l’Atelier des Chefs. Plus de 70 personnes ont pu ainsi faire le plein de conseils pour faire travailler en synergie le SEO, l’UX et la CRO tout en plaçant le consommateur au centre de la réflexion.
Comment optimiser la conversion de son site avec Google Analytics ?
Augmenter le trafic de votre site et le taux de conversion sont deux éléments essentiels qui vous permettront d’augmenter SIGNIFICATIVEMENT vos ventes
Similaire à Optimiser la performance business de votre site avec l'A/B Testing (20)
Optimiser la performance business de votre site avec l'A/B Testing
1. Optimiser la performance business de votre site
avec l'A/B Testing
Gilles Laborderie
Directeur Technique Web & Mobile
Twitter : @g_laborderie
2. Twenga
La plateforme de shopping
ouverte qui offre le plus
grand choix du web.
Plus de 450 millions d’offres
venant de plus de 230 000
boutiques en ligne.
Déployé dans 15 pays :
France, Royaume-
Uni, Espagne, Italie, Allemag
ne, Pays-
Bas, Belgique, Suisse, Polog
ne, Brésil, Russie, Etats-
Unis, Australie, Chine et
Japon
3. Agenda
Qu’est-ce que l’A/B Testing ?
Les bénéfices de l’A/B Testing
Le processus d’A/B Testing
L’A/B Testing chez Twenga
Comprendre les limites de l’A/B Testing
Bien se lancer
4. Qu’est-ce-que l’A/B Testing ?
Une technique marketing pour tester et optimiser la performance
d’une proposition commerciale.
Initialement utilisé pour les campagnes marketing par courrier
Aujourd’hui, utilisé par les acteurs du Web pour optimiser la
performance des bannières publicitaires, des campagnes d’e-mailing
et des sites Web.
Autres techniques similaires :
Test A/B/N
Test multivarié
5. A/B Testing en image
Version A
50 visiteurs 2 clics 8%
Conversion
4%
Version B
100 visiteurs
A B
50 visiteurs 4 clics
6. Pourquoi tester ?
Parce que l’on améliore que ce que l’on mesure
Parce qu’il n’existe pas de recommandations universelles
Parce que c’est moins cher que d’acheter plus de trafic
Parce qu’ils le font ! Amazon, Google, Microsoft, etc.
7. Que peut-on tester ?
Bannière publicitaire
Email (titre – message)
Landing page
Pages Web
8. Un exemple de test A/B sur une landing page
+60%
Version de contrôle Variation
Copyright Abtests.com
9. Un exemple de test A/B/C sur une page d’accueil
Version
de contrôle
+67,8% +23%
Version A Version B
Copyright Anne Holland Ventures, Inc. http://whichtestwon.com/
10. Un exemple de test A/B sur un élément de design
Version de contrôle
+28%
Variation
Copyright Wingify
11. Agenda
Qu’est-ce que l’A/B Testing ?
Les bénéfices de l’A/B Testing
Le processus d’A/B Testing
L’A/B Testing chez Twenga
Comprendre les limites de l’A/B Testing
Bien se lancer
12. Bénéfices de l’A/B testing
Expérience en conditions réelles
Technique peu onéreuse
Peut détecter de petites variations de performance
13. Agenda
Qu’est-ce que l’A/B Testing ?
Les bénéfices de l’A/B Testing
Le processus d’A/B Testing
L’A/B Testing chez Twenga
Comprendre les limites de l’A/B Testing
Bien se lancer
15. 1. Définition de l’expérience
Définir l’indicateur / métrique à optimiser et le champs de contraintes
Définir la(les) version(s)
Forme : mise en page, couleurs, positions, etc.
Contenu : titres, textes, images, formulaires, etc.
Concept : tarification, promotions, etc.
Définir les paramètres de l’expérience
Segmentation des utilisateurs
Répartition du trafic entre les différentes versions
Durée (utiliser un outil pour calculer la durée)
16. 2. Implémentation
Développement des versions
Création et configuration du test
Frameworks PHP Outils commerciaux
phpA/B Google Website Optimizer
phpScenario Visual Web Optimizer
Optimizely
Omniture's Test & Target
Webtrends Optimize
Etc.
Déploiement des versions
Recetter toutes les versions comme une version de production !
17. 2. Implémentation – les frameworks
Configuration du test
Déclaratif dans le code PHP / fichiers de configuration
OU Stocké en BD / Cache
Implémentation des versions
<?php
if (MyFramework::IsControl('my_test')) {
// control version
} else {
// alternate version
}
?>
18. 2. Implémentation – Les solutions commerciales
GET /2345/test.js 1. Configure un test A/B
EasyTesting.com
Chef de produit
MyShop.com
GET /
2. Insère le script JS
Internaute
MyShop.com
19. 3. Expérience
Mise en ligne de l’expérience
Expérience
Utiliser un outil statistique pour définir la durée de l’expérience
Source
Mise hors ligne à la fin de l’expérience
Automatiquement ou manuellement
20. 4. Analyse
Compilation des résultats
Récupération des métriques
- Métrique à optimiser ET champs de contrainte
Agrégation des métriques
Analyse des résultats
Analyse, mise en forme, etc.
Analyse de la fiabilité des résultats
Conclusion de l’expérience Source
Synthèse de l’expérience et des résultats
Recommandation
21. 4. Analyse – Un peu de statistiques
Il est nécessaire de calculer la fiabilité statistique des résultats
observés avant de conclure
Test Khi2
1. Calculer la valeur Khi2
2. La valeur Khi2 donne le niveau de confiance que les résultats soient
significatifs
Confiance 95% 99% 99,9%
Khi2 > 3,8 6,6 10,8
La test Khi2 dépend en particulier du nombre d’observations
Plus le site a de trafic, moins longtemps il faudra pour conclure sur la fiabilité
des observations
22. Agenda
Qu’est-ce que l’A/B Testing ?
Les bénéfices de l’A/B Testing
Le processus d’A/B Testing
L’A/B Testing chez Twenga
Comprendre les limites de l’A/B Testing
Bien se lancer
23. A/B Testing chez Twenga
Un test à la fois
Généralement sur un pays
Optimisation d’indicateur business sous contraintes de KPI
Pages vues par visite
Taux de rebond
Taux de conversion
Revenu par visite
Temps passé sur le site
Utilisation d’un framework PHP maison
Essentiellement pour des raisons de performance
25. Framework d’A/B Testing (2/2)
Versions
et répartition
Identifiant
du test
Version
par défaut
26. Premier exemple : bannière animée vs. Image fixe (1/2)
Objectif du test : déterminer quel format génère le plus de clics
Version A
Version B
27. Premier exemple : bannière animée vs. Image fixe (2/2)
Tableau récapitulatif des Pages vues / Clics
Pages vues Clics Taux de clics
FLASH 3 361 008 1 014 0,030%
PNG 3 370 304 2 870 0,085%
Significativité
Test du Khi²
Khi² de notre série (FLASH vs. PNG) 881,28
Khi² à dépasser avec 99,9% de confiance 10,83
Le résultat est hautement significatif avec 99% de confiance.
Conclusion
La version PNG performe plus que la version FLASH
28. Deuxième exemple : filtre de prix (1/2)
Objectif du test : déterminer comment les internautes préfèrent filtrer par
prix
Version A Version B
Tranches de prix pré-déterminés Slider de prix
29. Deuxième exemple : filtre de prix (2/2)
Le taux d'utilisation du filtre PRIX est impacté par la forme de ce
filtre.
La version A (tranches de prix) a un taux d'utilisation 1,33 x plus important que
la version B (slider de prix).
Cette différence est hautement significative.
Taux d'utilisation du filtre
2.5%
2.0%
1.5%
1.0%
0.5%
0.0%
Price Range Price Slider
30. A/B Testing chez Twenga
Ces résultats sont contextuels et ne sont pas généralisable
Nous complétons les tests A/B par des tests utilisateurs
Permet de tester des prototypes (voire des prototypes papier)
Permet d’avoir une approche plus orientée utilisateur
31. Agenda
Qu’est-ce que l’A/B Testing ?
Les bénéfices de l’A/B Testing
Le processus d’A/B Testing
L’A/B Testing chez Twenga
Comprendre les limites de l’A/B Testing
Bien se lancer
32. Comprendre les limites de l’A/B Testing
Nécessite de développer, recetter et déployer toutes les versions
N’évalue que les versions testées
Ne favorise pas la compréhension profonde du comportement des
utilisateurs
Ne fonctionne que pour ce qui est mesurable par une session HTTP
Orienté court-terme
Peut conduire à un maximum local
33. Agenda
Qu’est-ce que l’A/B Testing ?
Les bénéfices de l’A/B Testing
Le processus d’A/B Testing
L’A/B Testing chez Twenga
Comprendre les limites de l’A/B Testing
Bien se lancer
34. Bien se lancer
Commencer par :
Les pages les plus visitées
Les pages avec le plus grand taux de rebond
Les tunnels business
- Inscription
- Achat
A ne pas faire A faire
Tester les versions Vérifier la fiabilité de vos tests
séquentiellement Montrer la même variation aux
Faire plusieurs tests à la fois utilisateurs
Perturber vos utilisateurs Vérifier la cohérence générale
Partager les résultats en interne