Diese Sind die Slides eines gemeinsamen Webinars mit AutoScout24 zum Thema "Wie AutoScout eine Kultur der ständigen Optimierung und des Testens aufgebaut hat." Das Webinar zeigte Best Practices und Learnings und behandelte folgende Themen: Inhalte: - Testprozess bei AutoScout24: Ziele & Visionen - Das Conversion Team und seine Aufgaben - Testanforderungen & Planung - Von der Hypothese zum Test - Ergebnisse auswerten & dokumentieren AutoScout experimentiert schon seit Jahren auf seiner Seite und hat sich Expertise und Strukturen aufgebaut. Für alle die noch nicht ganz so weit sind, allerdings gerne mehr zum Thema Testing und Optimierung erfahren wollen gibt es hier ein Ebook zum Download: http://optimize.ly/1uKgpbD Um Inspiration rund um das Thema A/B Tests und Webseitenoptimierung zu finden, besuchen Sie doch einfach einmal unser Blog: http://blog.optimizely.de/ Möchten Sie gern selbst Ihre Webseite optimieren? Probieren Sie Optimizely für 30 Tage kostenfrei aus: https://www.optimizely.de/ Happy Testing!

1. Seite 1
Titel der Präsentation | Autor der Präsentation
Solvig van Severen
Product Manager im
Private Seller Team
bei AutoScout24

2. AutoScout24 & Optimizely:
Wie man eine Kultur der ständigen
Optimierung aufbaut
Munich 18.09.2014, Solvig van Severen, Product Manager

4. Ich weiß, dass ich nichts weiß.

6. Agenda
1. Motivieren oder Make Products People Love to Use
2. Prozess
1. Verstehen
2. Vorbereiten
3. Durchführen
4. Lernen
5. Implementieren
Seite 6
Wie man eine Kultur der ständigen Optimierung aufbaut | Solvig van Severen

7. Das Team:
Product Manager
Usability Expert
Data Analyst
QA
Developer
Designer
Product-manager
Designer Usability
Expert
Data Analyst QA Developer

8. Make Products People Love to Use.
Seite 8
Verbessern Erfinden
Wie man eine Kultur der ständigen Optimierung aufbaut | Solvig van Severen

9. Prozess
Seite 9
Wie man eine Kultur der ständigen Optimierung aufbaut | Solvig van Severen

10. Prozess
UNSICHERHEIT KLARHEIT / FOKUS
Untersuchen & verstehen Regelmäßig Testen Winner implementieren
Seite 10
Wie man eine Kultur der ständigen Optimierung aufbaut | Solvig van Severen
Quelle: Nach Damien Newman, Central

11. Ablauf regelmäßiger Test bei AutoScout24 die 5 Phasen
Ziele Verstehen Vorbereiten Durchführen Lernen Implementieren
Aktivitäten Analyse eigner Daten,
Experten interviewen
Wettbewerber
„auseinander- nehmen“
Ideen und Meinungen
sammeln
Hebel identifizieren,
Ideen in Test-
Visualisieren
Priorisieren
Test designen
Test aufsetzten
Estimation,
Umsetzung,
Test the Testing
Zahlen
sammeln,
aufbereiten
und
interpretieren
Story schreiben
Tracking definieren
ggf. direkt
internationalisieren
Erfolgsfaktoren Mix aus verschiedenen
Methoden verwenden
Gesamtbild gemeinsam
erarbeiten
Realistische
Zielerwartung
Das ganze Team ist
beteiligt
Gemeinsames
Verständnis
von der Idee
entwickeln
Visualisierung
Magic Estimation
Revenue Tracking
als Standard
definieren
Agile
Arbeitsumgebung
Ergebnisse
kom-munizieren
Agile
Arbeitsumgebung
Level od Done
Swimlane
Release on Demand
Schlüsselgefahren Objektivität und
Realismus bewahren
HIPPO‘s Nicht zu schnell
Ergebnisse
kommunizieren
Sich ändernde
Umwelt-faktoren
Langfrisitge
Produktsicht
Uplift schlägt sich
nicht in absoluten
Zahlen nieder
Elan verlieren
Seite 11
Wie man eine Kultur der ständigen Optimierung aufbaut | Solvig van Severen

12. Verstehen
Untersuchen & verstehen
• Wo wollen Sie mit Ihrem Landingpage Programm in 6 Monaten stehen?
• Wo in einem Jahr? Wie hoch soll die Konversionrate sein?
• Wie viele Tests möchten Sie parallel laufen lassen?
• Wie viel Traffic soll über Ihre Landingpages laufen?
• Wie schnell möchten Sie die Ergebnisse in die “normale” Seite übertragen?
• Wie hoch soll der Revenue Ihrer Maßnahmen sein?
Aktivitäten -> Forecast für Ziele erstellen
Priorisierung der Ressourcen nach:
- Umsatzrelevanz
- Strategischer Relevanz
- Geschätzter Komplexität
Entscheidende Erfolgsfaktoren Schlüsselgefahren
Analyse eigner Daten,
Experten interviewen
Wettbewerber
„auseinander- nehmen“
Ideen und Meinungen
sammeln
Ziele setzen
Objektivität und Realismus
bewahren
Mix aus verschiedenen Methoden verwenden
Gesamtbild gemeinsam erarbeiten
Realistische Zielerwartung gemeinsam erarbeiten
Seite 12
Wie man eine Kultur der ständigen Optimierung aufbaut | Solvig van Severen

13. Verstehen …in der AutoScout24 Praxis
Werkzeuge
Werkzeuge:
User Journey
Usability Lab
Umfragen
User Flows Diagramme
Seite 13
Wie man eine Kultur der ständigen Optimierung aufbaut | Solvig van Severen

14. Formulieren:
Zeit nehmen
Nicht Diskutieren – Testen!
Nutzen Sie qualitative Methoden
Schreiben Sie alle Ideen auf.
Priorisierung:
Großer Hebel?
Legal Constraints?
Kurze Beschreibung der Testhypothese
Einschätzung Verbesserungspotential
Wie hoch ist der grafische Aufwand?
Wie hoch ist der Aufwand im Front-End/
Umsetzung im Testing-System?
Wie schnell könnte der Test online gehen?
Werden IT-Ressourcen benötigt?
Ist der Test an Release-Zyklen gebunden?
Benötige ich politische Freigaben für den Test?
Aktivitäten Entscheidende Erfolgsfaktoren Schlüsselgefahren
Das ganze Team ist beteiligt
Gemeinsames Verständnis von der Idee entwickeln
Visualisierung
Magic Estimation
Vorbereiten
Hebel identifizieren,
Ideen in Test-
Visualisieren
Priorisieren
Test designen
Test aufsetzten
Testhypothesen formulieren und priorisieren
HIPPO‘s
Seite 14
Wie man eine Kultur der ständigen Optimierung aufbaut | Solvig van Severen
Werkzeuge:
Personas
EyeQuant
Magic Estimation
Team Board

15. Durchführen
Aktivitäten Entscheidende Erfolgsfaktoren Schlüsselgefahren
Estimation,
Umsetzung,
Test the Test
Test thesis:
Test Level:
Test goal:
Test KPI'S:
Test Targeting:
on URL:
Original: yx%
V1: yx%
V2: yx%
Test Duration: calculated with xy days
Running: [Date]
Bullshit in is Bullshit out
Test the Test
Agile Arbeitsumgebung
Teste nur das was auch so live gehen kann
auf dem lokalem Minimum
hängen bleiben
Kommunizieren und ein-beziehen
Test estimaten, aufsetzten und anschalten
Seite 15
Wie man eine Kultur der ständigen Optimierung aufbaut | Solvig van Severen

16. Lernen
Aktivitäten Entscheidende Erfolgsfaktoren Schlüsselgefahren
Estimation,
Umsetzung,
Test the Test
Ergebnisse kommunizieren
Revenue Tracking als Standard definieren
Nicht zu schnell
Ergebnisse kommunizieren
Love or hate?
Seite 16
Wie man eine Kultur der ständigen Optimierung aufbaut | Solvig van Severen

17. Lernen …. in der AutoScout24 Praxis
Love or hate?
Werkzeuge
Success Board: (inkl. Kill Spalte)
Aushang bei Kaffemaschine,
an Kühlschranktüren
in Fahrstühlen,
Vor Stockwerkeingangstühren
Stockwerübergreifend Boards zu Visiualierung schaffen
und/oder in Meetings wie:
Team internes “Messen und Lernen“ Meeting
PM – Meeting (Teamübergreifende Learnings)
Team Review
AutoScout24 Review
Seite 17
Wie man eine Kultur der ständigen Optimierung aufbaut | Solvig van Severen

18. Integrieren
Aktivitäten Entscheidende Erfolgsfaktoren Schlüsselgefahren
Story schreiben
Tracking definieren
ggf. direkt internationalisieren
Agile Arbeitsumgebung
Level of Done
Swimlane
Release on Demand
Langfrisitge Produktsicht
Uplift schlägt sich nicht in
absoluten Zahlen nieder
Elan verlieren
Release the Winner
Seite 18
Wie man eine Kultur der ständigen Optimierung aufbaut | Solvig van Severen

19. Laden Sie das Ebook kostenlos herunter: http://optimize.ly/1uKgpbD

20. www.autoscout24.de
Vielen Dank für Ihre
Aufmerksamkeit!
Solvig van Severen
svseveren@autoscout24.com