Die Zukunft der Optimierung
PROGRAMM
1. Warum A/B Testing?
2. 5 Praktische Beispiele
3. Ideen für Tests finden
4. Die Zukunft der Optimierung
MARIUS KREMEYER
Senior Account Executive
Psychologe
marius@optimizely.com
Dan Pete
2006:

Dan Siroker und Pete Koomen

— Product Manager bei Google
2008: 

Dan — Obama Campaign
2008 - 2010: 

Carr...
1. Warum A/B Testing?
92:1
92$ werden für Trafficakquise ausgegeben, nur 1$ für die Optimierung
* IBM TeaLeaf, 2012
1994
Seit wann optimiert Amazon seine Webseite?
10 - 20
Quelle: Wikimedia.org
Wie viele A/B Tests macht Wikipedia pro Tag?
6000
Quelle: Forbes India
Wie viele A/B Tests macht Google pro Jahr?
RICHARD FEYNMAN
“During the Middle Ages there were all kinds of crazy ideas, such as
that a piece of rhinoceros horn would...
RICHARD FEYNMAN
“But even today I meet lots of people who sooner or
later get me into a conversation about UFOs, or
astrol...
JOHN OHRINGER - CEO SHUTTERSTOCK
“Nothing goes live on Shutterstock without Testing.”
JEFF BEZOS - CEO AMAZON
“Experiments are by their very nature prone to failure.
But a few big successes compensate for dozens and
dozens of things...
2. Praktische Beispiele
ALLES HINTERFRAGEN!
700.000 EXPERIMENTE SPÄTER
PRAKTISCHE BEISPIELE
BEISPIEL: CHROME INDUSTRIES
Performen Bilder oder Videos auf Produktseiten
besser?
HYPOTHESE
Wenn: Wir statt Bildern Videos auf die Produktseiten setzen
Dann: Steigen die Bestellungen
Weil: Wir uns durch d...
+ 0,2% Conversions
0,2% Uplift in Sales
Videoproduktion teuer
—> Videos nicht rentabel
Große Ersparnis durch die Verwendung von Bildern
LEARN...
BEISPIEL: SIM CITY
Wie erhöhen wir die Anzahl der Vorbestellungen
für Sim City?
HYPOTHESE
Wenn: Wir den Rabattbanner entfernen
Dann: Steigen die Vorbestellungen
Weil: Die Besucher “nur” an dem neuen Spi...
+ 43% Vorbestellungen
Banner & 20$ off bei nächster Bestellung lenken ab
LEARNING
BEISPIEL: MAGINE
Wie erhöhen wir die Anzahl der Abonnenten?
HYPOTHESE
Wenn: Wir eine Grafik zum Anmeldeprozess auf der Landing Page
einsetzen
Dann: Steigen die Anmeldungen
Weil: Die B...
- 2% Klicks
+ 9% Abonnenten
Weniger Micro Conversions (Klicks)
Mehr Macro Conversions (Anmeldungen)
Da Nutzer wissen, worauf sie sich einlassen.
LEARN...
BEISPIEL: BLEACHER REPORT
Wie erhöhen wir Facebook Likes und somit
Wiederkehrenden Traffic?
HYPOTHESE
Wenn: Wir die Box für Social Shares besser* darstellen
Dann: Steigen die Fans auf Facebook und wiederkehrender T...
ORIGINAL
SOCIAL CONVERSIONS
HEUTE: SOCIAL PROMOTION
ERGEBNIS
+ 764% Social Conversions
3. Ideen für Tests finden
OPTIMIERUNGSZYKLUS
Ergebnisse!
Analyse!
Hypothesen!
Priorisierung!
A/BTest!
ABER WO FANGE ICH AN?
ANALYTICS
ANALYTICS
Visits
Sign-Ups
$ per
Recipient
Visitors
per Day
Email $$
ANALYTICS
Visits
Sign-Ups
$ per
Recipient
Visitors
per Day
Email $$
TICKETS / FRAGEN
NUTZER TESTS / USER-TESTS
HEATMAPS / EYETRACKING
Quelle: ClickTale, Eyequant
WETTBEWERBERANALYSE
1. Welche Webseiten nutzen Sie gerne?
2. Wer sind Ihre direkten Wettbewerber?
3. Was funktioniert in a...
4. Die Zukunft der Optimierung
Optimizely ist für A/B
Testing von Webseiten…
…UND AUCH FÜR:
• Personalisierungskampagnen
• Segmentierung von Besuchergruppen
• Agile Entwicklung & Deployments
• Optimi...
PERSONALISIERUNG
HYPOTHESE (DATING)
Wenn: Wir Personen, die sich noch kein Konto
erstellt haben, jeweils eine Person des anderen
Geschlecht...
ORIGINAL
VARIANTE IN OPTIMIZELY ANLEGEN
AUDIENCE IN OPTIMIZELY ANLEGEN
PERSONALISIERUNG MIT GEO-LOCATION
Wenn: Wir die Ansprache auf die Stadt beziehen
Dann: Werden mehr Besucher einen Termin bei der Parfümerie in
ihrer Nähe bu...
ORIGINAL
AUDIENCE ANLEGEN - LOCATION
VARIANTE - STADTSPEZIFISCH
Vs.
VERGLEICH - ORIGINAL & VARIANTE B
MOBILE OPTIMIERUNG
MOBILE EATS THE WORLD
Quelle: ComScore
SCHLECHTE MOBILE-ERFAHRUNGEN
Quelle: Smashingmagazine, 2013
SCHLECHTE MOBILE-ERFAHRUNGEN
MOBILE VS. WEB
BEISPIEL: NOTEBOOKSBILLIGER
Wie verringere ich die Abbruchrate beim mobilen Checkout?
Wenn: Shop Besucher Social Log-In
beim Check-Out nutzen können
Dann: Werden mehr Besucher den Kauf
abschließen
Weil: Nutze...
DESKTOP CHECKOUT
- Ohne Registrierung
- Social Log-in
- Log-in Wall
- Kein “Social Log-in”
MOBILER CHECKOUT
TESTIDEE
1. Shoppen ohne Registrierung erlauben
2. Einloggen mit Facebook ermöglichen
3. Warum sollte ich mich registriere...
BEISPIEL: ASOS
- Mehre Social Log-ins
- Zahlmethoden klar
- Geschlossener Check-Out
OPTIMIERUNG MOBILER APPS
BEISPIEL: FRENCH GIRLS
1 Million Downloads
Problem: User Retention
Ziel: Onboarding optimieren
AKTIVIERUNG NEUER USER
Aktivierung bei French Girls:
Selfie aufnehmen
Selfie zeichnen
Activation Rate: 25%
Wenn: Wir die Reihenfolge der Aktivitäten im Onboarding
ändern
Dann: Steigern wir die Anzahl aktivierter User
Weil: User e...
+ 100% Uplift in Nutzeraktivierung
CROSS-CHANNEL OPTIMIERUNG
STEFAN KAUFT SCHUHE
• Shoppt in der Zalando App im Zug auf
dem Weg nach hause, wird dabei aber
unterbrochen
• Sitzt auf de...
TANJA BUCHT EINEN FLUG
• Kriegt eine Einladung zum Geburtstag auf
der Facebook App – wechselt in die
Lufthansa App und sch...
BEISPIEL: HIPMUNK
Letzte Suche als
Default, wenn
man Endgerät
wechselt
BEISPIEL: GILT
Abbruchrate
durch Push-
Notifications
senken
Data
Sie Ihre Besucher
Action
LEARNINGS
1. A/B Testing - Alles Hinterfragen!
2. Mit Sinn und Verstand Testen
3. A/B Testing geht über Desktop hinaus
marius@optimizely.com
Kontaktdaten:
Vielen Dank!
Die Zukunft der Optimierung  - CROissants mit Optimizely & TIE Kinetix
Die Zukunft der Optimierung  - CROissants mit Optimizely & TIE Kinetix
Die Zukunft der Optimierung  - CROissants mit Optimizely & TIE Kinetix
Die Zukunft der Optimierung  - CROissants mit Optimizely & TIE Kinetix
Die Zukunft der Optimierung  - CROissants mit Optimizely & TIE Kinetix
Die Zukunft der Optimierung  - CROissants mit Optimizely & TIE Kinetix
Die Zukunft der Optimierung  - CROissants mit Optimizely & TIE Kinetix
Die Zukunft der Optimierung  - CROissants mit Optimizely & TIE Kinetix
Nächste SlideShare
Wird geladen in …5
×

Die Zukunft der Optimierung - CROissants mit Optimizely & TIE Kinetix

469 Aufrufe

Veröffentlicht am

Präsentation von Marius Kremeyer bei CROissants mit Optimizely & TIE Kinetix in München am 12.3.2015

Lernen Sie:

- Warum große Unternehmen wie Amazon & Google schon lange testen
- Wie andere Unternehmen durch A/B Tests Bestellungen und Anmeldungen steigern
- Wie Sie neue Ideen für A/B Tests generieren
- Wie Sie mobil optimieren
- Wie Sie den gesamten Customer Journey optimieren

Mehr Informationen über Optimizely hier: https://www.optimizely.de/

Praxisbeispiele finden Sie bei uns im Blog:
http://blog.optimizely.de/

Mehr Infos zu TIE Kinetix & Optimizely finden Sie hier:
https://www.optimizely.com/partners/solutions/tiekinetix/

Veröffentlicht in: Marketing
0 Kommentare
1 Gefällt mir
Statistik
Notizen
  • Als Erste(r) kommentieren

Keine Downloads
Aufrufe
Aufrufe insgesamt
469
Auf SlideShare
0
Aus Einbettungen
0
Anzahl an Einbettungen
3
Aktionen
Geteilt
0
Downloads
11
Kommentare
0
Gefällt mir
1
Einbettungen 0
Keine Einbettungen

Keine Notizen für die Folie

Die Zukunft der Optimierung - CROissants mit Optimizely & TIE Kinetix

  1. 1. Die Zukunft der Optimierung
  2. 2. PROGRAMM 1. Warum A/B Testing? 2. 5 Praktische Beispiele 3. Ideen für Tests finden 4. Die Zukunft der Optimierung
  3. 3. MARIUS KREMEYER Senior Account Executive Psychologe marius@optimizely.com
  4. 4. Dan Pete 2006:
 Dan Siroker und Pete Koomen
 — Product Manager bei Google 2008: 
 Dan — Obama Campaign 2008 - 2010: 
 Carrotsticks, Spreadly, 
 undY Combinator. 2010: Gründung von Optimizely 2012 (Okt.): 100,000th Experiment, over
 1 Billion pages. #1 Website Optimization Platform 2013: $28M für Internationalisierung 100K $28M Unsere Geschichte 9000 Glückliche Kunden $57M 2014: $57M für weitere Expansion
  5. 5. 1. Warum A/B Testing?
  6. 6. 92:1 92$ werden für Trafficakquise ausgegeben, nur 1$ für die Optimierung * IBM TeaLeaf, 2012
  7. 7. 1994 Seit wann optimiert Amazon seine Webseite?
  8. 8. 10 - 20 Quelle: Wikimedia.org Wie viele A/B Tests macht Wikipedia pro Tag?
  9. 9. 6000 Quelle: Forbes India Wie viele A/B Tests macht Google pro Jahr?
  10. 10. RICHARD FEYNMAN “During the Middle Ages there were all kinds of crazy ideas, such as that a piece of rhinoceros horn would increase potency. Then a method was discovered for separating ideas […] And it developed very well, so that we are now in a scientific age.”
  11. 11. RICHARD FEYNMAN “But even today I meet lots of people who sooner or later get me into a conversation about UFOs, or astrology, […] and so forth. And I’ve concluded that it’s not a scientific world.”
  12. 12. JOHN OHRINGER - CEO SHUTTERSTOCK
  13. 13. “Nothing goes live on Shutterstock without Testing.”
  14. 14. JEFF BEZOS - CEO AMAZON
  15. 15. “Experiments are by their very nature prone to failure. But a few big successes compensate for dozens and dozens of things that didn’t work.”
  16. 16. 2. Praktische Beispiele
  17. 17. ALLES HINTERFRAGEN! 700.000 EXPERIMENTE SPÄTER
  18. 18. PRAKTISCHE BEISPIELE
  19. 19. BEISPIEL: CHROME INDUSTRIES Performen Bilder oder Videos auf Produktseiten besser?
  20. 20. HYPOTHESE Wenn: Wir statt Bildern Videos auf die Produktseiten setzen Dann: Steigen die Bestellungen Weil: Wir uns durch die Bilder emotionaler angesprochen fühlen.
  21. 21. + 0,2% Conversions
  22. 22. 0,2% Uplift in Sales Videoproduktion teuer —> Videos nicht rentabel Große Ersparnis durch die Verwendung von Bildern LEARNING
  23. 23. BEISPIEL: SIM CITY Wie erhöhen wir die Anzahl der Vorbestellungen für Sim City?
  24. 24. HYPOTHESE Wenn: Wir den Rabattbanner entfernen Dann: Steigen die Vorbestellungen Weil: Die Besucher “nur” an dem neuen Spiel interessiert sind und nicht an Rabatten für Folgekäufe.
  25. 25. + 43% Vorbestellungen
  26. 26. Banner & 20$ off bei nächster Bestellung lenken ab LEARNING
  27. 27. BEISPIEL: MAGINE Wie erhöhen wir die Anzahl der Abonnenten?
  28. 28. HYPOTHESE Wenn: Wir eine Grafik zum Anmeldeprozess auf der Landing Page einsetzen Dann: Steigen die Anmeldungen Weil: Die Besucher genau wissen, welche Schritte auf Sie zukommen werden
  29. 29. - 2% Klicks + 9% Abonnenten
  30. 30. Weniger Micro Conversions (Klicks) Mehr Macro Conversions (Anmeldungen) Da Nutzer wissen, worauf sie sich einlassen. LEARNING
  31. 31. BEISPIEL: BLEACHER REPORT Wie erhöhen wir Facebook Likes und somit Wiederkehrenden Traffic?
  32. 32. HYPOTHESE Wenn: Wir die Box für Social Shares besser* darstellen Dann: Steigen die Fans auf Facebook und wiederkehrender Traffic Weil: Die Besucher eine andere Darstellung der Box weniger aufdringlich finden
  33. 33. ORIGINAL
  34. 34. SOCIAL CONVERSIONS
  35. 35. HEUTE: SOCIAL PROMOTION
  36. 36. ERGEBNIS + 764% Social Conversions
  37. 37. 3. Ideen für Tests finden
  38. 38. OPTIMIERUNGSZYKLUS Ergebnisse! Analyse! Hypothesen! Priorisierung! A/BTest!
  39. 39. ABER WO FANGE ICH AN?
  40. 40. ANALYTICS
  41. 41. ANALYTICS Visits Sign-Ups $ per Recipient Visitors per Day Email $$
  42. 42. ANALYTICS Visits Sign-Ups $ per Recipient Visitors per Day Email $$
  43. 43. TICKETS / FRAGEN
  44. 44. NUTZER TESTS / USER-TESTS
  45. 45. HEATMAPS / EYETRACKING Quelle: ClickTale, Eyequant
  46. 46. WETTBEWERBERANALYSE 1. Welche Webseiten nutzen Sie gerne? 2. Wer sind Ihre direkten Wettbewerber? 3. Was funktioniert in anderen Branchen / Kategorien besonders gut?
  47. 47. 4. Die Zukunft der Optimierung
  48. 48. Optimizely ist für A/B Testing von Webseiten…
  49. 49. …UND AUCH FÜR: • Personalisierungskampagnen • Segmentierung von Besuchergruppen • Agile Entwicklung & Deployments • Optimierung mobiler Webseiten • Optimierung von Apps in iOS & Android • Cross-Channel Optimierung
  50. 50. PERSONALISIERUNG
  51. 51. HYPOTHESE (DATING) Wenn: Wir Personen, die sich noch kein Konto erstellt haben, jeweils eine Person des anderen Geschlechts zeigen Dann: Erhöhen wir die Anzahl der Anmeldungen Weil: Nutzer sich persönlich angesprochen fühlen.
  52. 52. ORIGINAL
  53. 53. VARIANTE IN OPTIMIZELY ANLEGEN
  54. 54. AUDIENCE IN OPTIMIZELY ANLEGEN
  55. 55. PERSONALISIERUNG MIT GEO-LOCATION
  56. 56. Wenn: Wir die Ansprache auf die Stadt beziehen Dann: Werden mehr Besucher einen Termin bei der Parfümerie in ihrer Nähe buchen Weil: Nutzer sich persönlich angesprochen fühlen HYPOTHESE
  57. 57. ORIGINAL
  58. 58. AUDIENCE ANLEGEN - LOCATION
  59. 59. VARIANTE - STADTSPEZIFISCH
  60. 60. Vs. VERGLEICH - ORIGINAL & VARIANTE B
  61. 61. MOBILE OPTIMIERUNG
  62. 62. MOBILE EATS THE WORLD Quelle: ComScore
  63. 63. SCHLECHTE MOBILE-ERFAHRUNGEN
  64. 64. Quelle: Smashingmagazine, 2013 SCHLECHTE MOBILE-ERFAHRUNGEN
  65. 65. MOBILE VS. WEB
  66. 66. BEISPIEL: NOTEBOOKSBILLIGER Wie verringere ich die Abbruchrate beim mobilen Checkout?
  67. 67. Wenn: Shop Besucher Social Log-In beim Check-Out nutzen können Dann: Werden mehr Besucher den Kauf abschließen Weil: Nutzer Bequemlichkeit schätzen und keinen zusätzlichen Account anlegen müssen HYPOTHESE
  68. 68. DESKTOP CHECKOUT - Ohne Registrierung - Social Log-in
  69. 69. - Log-in Wall - Kein “Social Log-in” MOBILER CHECKOUT
  70. 70. TESTIDEE 1. Shoppen ohne Registrierung erlauben 2. Einloggen mit Facebook ermöglichen 3. Warum sollte ich mich registrieren?
  71. 71. BEISPIEL: ASOS - Mehre Social Log-ins - Zahlmethoden klar - Geschlossener Check-Out
  72. 72. OPTIMIERUNG MOBILER APPS
  73. 73. BEISPIEL: FRENCH GIRLS 1 Million Downloads Problem: User Retention Ziel: Onboarding optimieren
  74. 74. AKTIVIERUNG NEUER USER Aktivierung bei French Girls: Selfie aufnehmen Selfie zeichnen Activation Rate: 25%
  75. 75. Wenn: Wir die Reihenfolge der Aktivitäten im Onboarding ändern Dann: Steigern wir die Anzahl aktivierter User Weil: User eher Aktionen ausführen, die sie wenig Aufwand kosten und bekannt sind (Selfie aufnehmen) HYPOTHESE
  76. 76. + 100% Uplift in Nutzeraktivierung
  77. 77. CROSS-CHANNEL OPTIMIERUNG
  78. 78. STEFAN KAUFT SCHUHE • Shoppt in der Zalando App im Zug auf dem Weg nach hause, wird dabei aber unterbrochen • Sitzt auf dem Sofa und sieht einen Zalando Spot, googelt Zalando auf dem Smartphone • Verlässt das Sofa und schließt den Einkauf auf dem Desktop ab
  79. 79. TANJA BUCHT EINEN FLUG • Kriegt eine Einladung zum Geburtstag auf der Facebook App – wechselt in die Lufthansa App und schaut wie teuer ein Flug ist • Zu hause angekommen, vergleicht Preise auf anderen Webseiten und bucht dann direkt auf der Lufthansa Desktop Webseite • Erhält Erinnerung für Check-In als Push Notification 24 Stunden vor Flug
  80. 80. BEISPIEL: HIPMUNK Letzte Suche als Default, wenn man Endgerät wechselt
  81. 81. BEISPIEL: GILT Abbruchrate durch Push- Notifications senken
  82. 82. Data Sie Ihre Besucher Action
  83. 83. LEARNINGS 1. A/B Testing - Alles Hinterfragen! 2. Mit Sinn und Verstand Testen 3. A/B Testing geht über Desktop hinaus
  84. 84. marius@optimizely.com Kontaktdaten:
  85. 85. Vielen Dank!

×