In diesem gemeinsamen Webinar zwischen Applause und Optimizely erfahren Sie u.a. - Welche Probleme es beim Testen von Webseiten gibt - Wie Usability Tests und A/B Tests zusammenpassen - Wie man nicht testen sollte - Modell des ganzheitlichen Testens Dieses Webinar wurde am 17.6.2014 präsentiert. Für mehr Infos besuchen Sie gerne: http://applause.com/ https://www.optimizely.de/ http://blog.optimizely.de/ Usability Testing und A/B Tests sind eng miteinander verzahnt und der gemeinsame Einsatz beider Methoden führt zu höheren Conversions und besserer Nutzererfahrung.

1. |
Webinar: Usability Testing &
Conversion Optimierung
1 7 . 0 6 . 2 0 1 4
A p p l a u s e | O p t i m i z e l y

2. |
• Kurze Vorstellung
• Probleme beim Testen von Webseiten
• Wie passen Usability- & A/B Tests zusammen
• Wie man nicht testen sollte
• Modell: Ganzheitliches Testen
2
P r o g r a m m / T h e m e n

3. | 3
V o r s t e l l u n g
Vorstellung
Fabian Liebig – Marketing Manager DACH
Fabian hat sich schon immer für Marketing und
Psychologie interessiert. Er leitet bei Optimizely das
Marketing für DACH und zeigt Unternehmen
leidenschaftlich gern, warum sie auf ihre Daten
hören sollten.
fabian@optimizely.com
Lars Tannhäuser – Business Development DACH
Lars war schon immer begeistert davon, die Qualität
digitaler Produkte zu verbessern und Prozesse und
Leistungen im Unternehmen zu optimieren. Bei Applause
berät er Unternehmen zu Themen wie ‘Steigerung der
Conversion Rate’ und ‘Qualitätssicherung’.
lltannhaeuser@applause.com

4. |
17.06.2014
Applause | Optimizely
INTRODUCING APPLAUSE
T H E 3 6 0 ° A P P Q U A L I T Y C O M P A N Y

5. |
The Challenge

6. |
• Früher bekannt als uTest, Marktführer für In-The-Wild Testing
• Büros überall auf der Welt
– Boston, San Francisco, Seattle, Tel Aviv, Warschau und mehr
• Gegründet in 2007
• 5 Finanzierungsrunden, insgesamt $80 Millionen Finanzierung
– Letzte Runde angeleitet von Goldman Sachs
• Anerkannt bei Presse und Fachleuten
– 2 Jahre in Folge vom Forbes Magazine zu einem der
“bewundernswertesten Unternehmen” ausgezeichnet
– 2 Jahre in Folge vom Inc. Magazine zu eines der 500 am schnellsten
wachsenden Unternehmen ausgezeichnet 6
E I N P A A R I N F O S Z U A P P L A U S E

7. |
2,000+
CUSTOMERS
7
A P P L A U S E i n Z a h l e n
40,000+
B U I L D S T E S T E D
140,000+
P R O F E S S I O N A L
T E S T E R S
100 Million+
A P P S TO R E
R E V I E W S C R AW L E D
OVER 1 MILLION
I N - T H E - W I L D I S S U E S R E P O RT E D B Y T E S T E R S

8. | 8
E I N I G E U N S E R E R K U N D E N
(E-)Commerce Reise SocialMedia

9. |
W a r u m i s t U s a b i l i t y w i c h t i g
• Durch Usabiliy Testing verstehen Entwickler wie ihre Nutzer
das Produkt tatsächlich verwenden
• Frustmomente werden Kunden abschrecken und sie werden zu
anderen Produkten wechseln
– Schlechte Usability à Frustration
– Frustration à Schlechte Bewertungen
– Schlechte Bewertungen à Beschädigte Reputation und
verlorene Sales
9

10. | 10
N U T Z E R S I N D G E S P R Ä C H I G E R D E N N J E

11. |
W a r u m i s t U s a b i l i t y w i c h t i g
11

12. |
• Praxisnahe Usability-Testing-Lösungen
• Von Experten geleitete Usability-Studien
• Zielgruppen-Übereinstimmung
• Bildschirmmitschnitte
• Umfangreicher Bericht
• Ergebnispräsentation
12
U S A B I L I T Y T E S T S

13. | 13
B e i s p i e l e
1.
Seitenaufbau der Startseite macht
Produktsuche schwierig und sieht nicht
aus wie ein Online-Shop

14. | 14
B e i s p i e l e
2. Häufig werden keine Ergebnisse ohne
Fehler angezeigt

15. | 15
B e i s p i e l e
3. Einige Icons sowie werden von den
Probanden zum Teil nicht verstanden.

16. |
• Functional Testing ist:
– Entdeckung und Beschreibung von Bugs in einer Software
16
F U N C T I O N A L T E S T I N G ?

17. |
• Quality, Quality, Quality
– Funktionale Fehler vor den Kunden finden
- Bugs à Frustration
- Frustration à Schlechte Bewertungen
- Schlechte Bewertungen à Beschädigte Reputation und
verlorene Sales
17
W A R U M I S T D A S W I C H T I G

18. |
• Praxisnahe funktionale Testing-Lösungen
• Ergänzung von In-House-Testing
– Applause erstellt ein individuelles Team von Testern
• Tests auf realen Geräten, an realen Orten
– Unbegrenztes, manuelles, exploratives Testen
– Test Case Ausführung
• Integriert mit Ihrem Bug-Tracking System
– Jira, Bugzilla, Rally, Mantis und weitere…
• Bug Fix Überprüfung
18
F U N K T I O N A L E T E S T S

19. | 19
3 6 0 ° A P P Q U A L I T Y D A S H B O A R D

20. | 20
A P P L A U S E E N A B L E S Y O U T O A C H I E V E
L o a d e - Te s t i n g
F u n c t i o n a l - Te s t i n g
S e c u r i t y - Te s t i n g
Konzept
Design
CodingTest
Release
W e t t b e w e r b s a n a l y s e
D e s i g n - / M o c k u p - Te s t s
U s e r - R e s e a r c h
A / B - Te s t i n g
U s a b i l i t y - Te s t i n g
A / B - Te s t i n g
U s a b i l i t y - Te s t i n g
F u n c t i o n a l Te s t s
F u n c t i o n a l - Te s t i n g

21. | 21
O p t i m i z e l y . d e
Was macht Optimizely?
Optimizely hilft Ihnen, Ihre Webseite mit A/B- und
Multivariate Tests zu optimieren*
*Durch unseren visuellen Editor ist dies jedem möglich, auch Nutzern
ohne technische Kenntnisse.

22. | 22
O p t i m i z e l y i n Z a h l e n

23. | 23
O p t i m i z e l y . d e
A/B Test – Ein Beispiel

24. | 24
O p t i m i z e l y . d e
Analyse
Analyse der Webseite:
70 - 80% aller Klicks entfallen auf das erste Bild, andere Angebote
werden nicht wahrgenommen – Real Estate verschenkt.

25. | 25
O p t i m i z e l y . d e
Hypothese
Hypothese:
Wenn wir statt des Sliders, statische Bilder nutzen, erhöhen wir die
Anzahl der Klicks auf die Angebote.

26. | 26
O p t i m i z e l y . d e
Varianten Erstellen

27. | 27
O p t i m i z e l y . d e
Varianten Erstellen
Variante A
NEU: Variante B

28. | 28
O p t i m i z e l y . d e
Auswerten
54% mehr Klicks

29. | 29
O p t i m i z e l y . d e
Wobei helfen A/B Tests?
- Agile Projekt-und Produktentwicklung
- Verhalten auf meiner Webseite analysieren
- Schwachstellen verbessern
- Verifizierung von Ideen und Designs
_____________________________________________________
Daten statt Bauchgefühl
Informierte Entscheidungen
Bessere Usability & höhere Conversions

30. | 30
O p t i m i z e l y . d e

31. | 31
O p t i m i z e l y . d e
6 Schritte beim A/B Testen
1. Analyse der Webseite
2. Conversionziele festlegen
3. Optimierungsbereich bestimmen
4. Quantifizierbare Hypothesen erstellen
5. Varianten in Optimizely erstellen
6. Testergebnisse interpretieren

32. | 32
O p t i m i z e l y . d e
Zyklus des Testens

33. | 33
O p t i m i z e l y . d e
Priorisierung von Tests

34. | 34
O p t i m i z e l y . d e

35. | 35
O p t i m i z e l y . d e
- 92% CTR

36. | 36
O p t i m i z e l y . d e
Jeder Test ist eine
Möglichkeit, etwas über
den Besucher zu lernen

37. | 37
L o a d e - Te s t i n g
F u n c t i o n a l - Te s t i n g
S e c u r i t y - Te s t i n g
Konzept
Design
CodingTest
Release
W e t t b e w e r b s a n a l y s e
D e s i g n - / M o c k u p - Te s t s
U s e r - R e s e a r c h
A / B - Te s t i n g
U s a b i l i t y - Te s t i n g
A / B - Te s t i n g
U s a b i l i t y - Te s t i n g
F u n c t i o n a l Te s t s
F u n c t i o n a l - Te s t i n g

38. | 38
O p t i m i z e l y . d e
Fragen?