3. #1
„Ich habe nicht genügend Besucher
für A/B Testing.”
Optimizely.de
conversionlift.de
4. „Ich habe nicht genügend Besucher für A/B Testing.”
Lange Testlaufzeiten sind nicht schlimm
Optimizely.de
conversionlift.de
5. „Ich habe nicht genügend Besucher für A/B Testing.”
Optimizely.de
conversionlift.de
6. „Ich habe nicht genügend Besucher für A/B Testing.”
Optimizely.de
conversionlift.de
7. „Ich habe nicht genügend Besucher für A/B Testing.”
A/B Test gesamter Funnel
A/B Test Detailseite -> Warenkorb
100 Besucher am Tag
43 Besucher/Tag
1% Conversion Rate (Baseline)
13% Conversion Rate (Baseline)
+25% Conversion Rate Uplift
+25% Conversion Rate Uplift
Testdauer: 253 Tage
Testdauer: 40 Tage
Optimizely.de
conversionlift.de
8. „Ich habe nicht genügend Besucher für A/B Testing.”
“Keep it simple.”
Optimizely.de
conversionlift.de
9. #2
„Ich habe keine Idee, was ich testen soll.”
Optimizely.de
conversionlift.de
10. „Ich habe keine Idee, was ich testen soll.”
Der 5-Sekunden-Test
Worum geht es?
Was bringt mir das?
Wie geht es weiter?
Optimizely.de
conversionlift.de
11. „Ich habe keine Idee, was ich testen soll.”
Direktes Nutzer Feedback
durch Beobachtung
Optimizely.de
conversionlift.de
12. „Ich habe keine Idee, was ich testen soll.”
Analytics + Empathie
Optimizely.de
conversionlift.de
13. „Ich habe keine Idee, was ich testen soll.”
Einsatz von Conversion Frameworks
Optimizely.de
conversionlift.de
15. „Ich weiß nicht, wer testen soll.”
• Webseitenoptimierung ist interdisziplinär
• Marketing, Produktmanagement, Entwicklung & Design
• Wie passt Webseitenoptimierung in meine Organisation?
• Es gibt keine Blaupause
• 2 fundamental unterschiedliche Modelle
Optimizely.de
conversionlift.de
16. „Ich weiß nicht, wer testen soll.”
Zentralisiert vs. Dezentralisiert
Optimizely.de
conversionlift.de
17. „Ich weiß nicht, wer testen soll.”
Zentralisiert
Dezentralisiert
Aufbau
Ein Team verantwortet
alle Tests
Jeder Produktmanager,
jedes einzelne Team
verantwortet Tests
Beispiel
Adidas
The Guardian
Vorteil
Koordination,
Lerneffekt zentral
Agilität, mehr Tests
Nachteil
Keine Unabhängigkeit
Koordination, Siloeffekte
Optimizely.de
conversionlift.de
21. „Ich weiß nicht, wer testen soll.”
Optimizely.de
conversionlift.de
22. #4
„Ich weiß nicht, wie ich A/B Testing in meine
Strategie einbaue.”
Optimizely.de
conversionlift.de
23. „Ich weiß nicht, wie ich A/B Testing in meine Strategie einbaue.”
Beispiel 1: Tirendo
MDs
Marketing
IT/Produkt
CRO
OPs
CS
Entwickler
CRO
Webanalysten
Analysten
Projektmanager
Optimizely.de
conversionlift.de
Countries
24. „Ich weiß nicht, wie ich A/B Testing in meine Strategie einbaue.”
Je höher in der Organisation Testing und
Optimierung angesiedelt sind, desto höher
die Wahrscheinlichkeit für Erfolg
Optimizely.de
conversionlift.de
25. „Ich weiß nicht, wie ich A/B Testing in meine Strategie einbaue.”
Quelle: Forbes
Optimizely.de
conversionlift.de
26. „Ich weiß nicht, wie ich A/B Testing in meine Strategie einbaue.”
„Nothing goes live on Shutterstock without
A/B Testing.”
(Jon Oringer, Shutterstock)
Optimizely.de
conversionlift.de
27. „Ich weiß nicht, wie ich A/B Testing in meine Strategie einbaue.”
1. Daten sind Ihr Produkt
2. Daten schaffen Klarheit
3. Daten schaffen Wachstum
(Jon Oringer, Shutterstock)
Optimizely.de
conversionlift.de
28. „Ich weiß nicht, wie ich A/B Testing in meine Strategie einbaue.”
Wie viele A/B Tests macht Wikipedia?
Optimizely.de
conversionlift.de
29. „Ich weiß nicht, wie ich A/B Testing in meine Strategie einbaue.”
20 pro Tag
Optimizely.de
conversionlift.de
30. „Ich weiß nicht, wie ich A/B Testing in meine Strategie einbaue.”
Seit wann testet Amazon seine Webseite?
Optimizely.de
conversionlift.de
31. „Ich weiß nicht, wie ich A/B Testing in meine Strategie einbaue.”
1994
Optimizely.de
conversionlift.de
32. „Ich weiß nicht, wie ich A/B Testing in meine Strategie einbaue.”
„Encourage experimentation…
as much of it as possible”
(Jeff Bezos)
Optimizely.de
conversionlift.de
33. „Ich weiß nicht, wie ich A/B Testing in meine Strategie einbaue.”
Optimizely.de
conversionlift.de
34. „Ich weiß nicht, wie ich A/B Testing in meine Strategie einbaue.”
Optimizely.de
conversionlift.de
37. „Negative Resultate kosten mich Geld.”
• Gute Testhypothesen reduzieren Kosten
• “Best Practices” vor der Umsetzung hinterfragen
• Jedes Testergebnis dokumentieren
• Aus negativen Resultaten lernen
Optimizely.de
conversionlift.de
38. #6
„Wer garantiert mir, dass meine
Conversion Rate dauerhaft so gut bleibt?”
Optimizely.de
conversionlift.de
39. „Wer garantiert mir, dass meine Conversion Rate dauerhaft so gut bleibt.”
• Saisonalität
• Wochentagsdifferenzen
• Segment- & Traffic-Quellen-Differenzen
Optimizely.de
conversionlift.de
40. „Wer garantiert mir, dass meine Conversion Rate dauerhaft so gut bleibt.”
Die relative Conversion Rate
ist ausschlaggebend.
Nicht die absolute.
Optimizely.de
conversionlift.de
41. #7
„Ich kann meine Vorgesetzten nicht vom
Wert der Optimierung überzeugen.”
Optimizely.de
conversionlift.de
42. „Ich kann meinen Vorgesetzten nicht vom Wert der Optimierung überzeugen.”
Optimizely.de
conversionlift.de
43. „Ich kann meinen Vorgesetzten nicht vom Wert der Optimierung überzeugen.”
Hippo = Highest Paid
Person's Opinion
Optimizely.de
conversionlift.de
44. „Ich kann meinen Vorgesetzten nicht vom Wert der Optimierung überzeugen.”
Beispiel # 1
Optimizely.de
conversionlift.de
45. „Ich kann meinen Vorgesetzten nicht vom Wert der Optimierung überzeugen.”
Amazon früher
Optimizely.de
conversionlift.de
46. „Ich kann meinen Vorgesetzten nicht vom Wert der Optimierung überzeugen.”
Quelle: http://news.cs.washington.edu/
Optimizely.de
conversionlift.de
47. „Ich kann meinen Vorgesetzten nicht vom Wert der Optimierung überzeugen.”
Produktempfehlungen
Optimizely.de
conversionlift.de
48. „Ich kann meinen Vorgesetzten nicht vom Wert der Optimierung überzeugen.”
Diskussion bei Amazon
Amazon CTO: „Das lenkt vom Checkout ab – schlechte Idee.”
Greg Linden: „Lass uns ein Experiment machen.”
Ergebnis: Checkout mit Empfehlungen klarer Gewinner.
Optimizely.de
conversionlift.de
49. „Ich kann meinen Vorgesetzten nicht vom Wert der Optimierung überzeugen.”
Produktempfehlungen
Optimizely.de
conversionlift.de
50. „Ich kann meinen Vorgesetzten nicht vom Wert der Optimierung überzeugen.”
Beispiel # 2
Optimizely.de
conversionlift.de
51. „Ich kann meinen Vorgesetzten nicht vom Wert der Optimierung überzeugen.”
„Ich stieß vor ca. 7 Monaten zum Unternehmen. Davor gab es niemanden, der
sich um die Optimierung der Webseite kümmerte. Unsere Werbeeinnahmen
schwinden und wir sind auf Abonnenten angewiesen.
Die einzige Möglichkeit, die wir sahen, war die Optimierung. In wenigen Monaten
haben wir den Umsatz durch Abonnenten mehr als verdoppelt.”
(Sverre Bech-Sjøthun, Aftenbladet)
Optimizely.de
conversionlift.de
52. „Ich kann meinen Vorgesetzten nicht vom Wert der Optimierung überzeugen.”
Ohne Testing
Mit A/B Testing
100.000 Besucher
100.000 Besucher
1% Conversion Rate
1,5% Conversion Rate
50 € durchschnittlicher Bestellwert
50 € durchschnittlicher Bestellwert
50.000 € Umsatz
75.000 € Umsatz
Optimizely.de
conversionlift.de
55. „Website Testing schadet meinem Google Ranking.”
„Es wird als Cloaking eingestuft.”
http://googlewebmastercentral.blogspot.in/2012/08/website-testing-google-search.html
Optimizely.de
conversionlift.de
56. „Website Testing schadet meinem Google Ranking.”
„Veränderungen in der Seitenstruktur
schaden der internen Verlinkung.”
Optimizely.de
conversionlift.de
58. Tipps für bessere Testresultate
1.
Teste niemals ohne Hypothese
2.
Nutze Web Analytics aktiv für die Hypothesenbildung
3.
Setze bewusst Conversion Frameworks ein
4.
Optimiere für Micro Conversions
5.
Optimiere für Nutzersegmente
6.
Beende einen Tests frühestens nach 2 Wochen
7.
Beende positive Tests nichts vor Erreichen der Signifikanz
8.
Schau dir segment-spezifische Ergebnisse nach Abschluss eines Tests an
9.
Dokumentiere Test-Resultate global für dein Unternehmen
10. Beginne gleich morgen!
Optimizely.de
conversionlift.de