SlideShare ist ein Scribd-Unternehmen logo
KPIs vs. UX
Ist User Experience messbar?
die firma . experience design / Matthias Feit
„Mit dem engl. Begriff key performance
indicators (KPI) werden in der
Betriebswirtschaftslehre allgemeine
Kennzahlen bezeichnet, die sich auf den
Erfolg, die Leistung oder Auslastung des
Betriebs, seiner einzelnen organisatorischen
Einheiten oder einer Maschine beziehen“
http://wirtschaftslexikon.gabler.de/Definition/key-performance-indicator-kpi.html
Taylorismus // Industriezeitalter
Weite Märkte
Wenig Konkurrenz
Lineare Systeme
Steuerung durch KPIs
Post-Taylorismus // Wissenszeitalter
Digitalisierung = Nicht-Lineare
Systeme = Komplexität
Enge globale Märkte
Viel Konkurrenz
Steuerung durch KPIs?
„User experience
encompasses all aspects of
the end-user's interaction
with the company, its
services, and its products.“
– Don Norman, Jakob Nielsen
https://www.nngroup.com/articles/definition-user-experience/
Äpfel und Birnen?
KPIs
Bilanz
UX
Nutzungserlebnis
KundeUnternehmen UX
Elemente der UX
Strategische Vorgaben
Unternehmensstrategie
Markenstrategie
Produktstrategie
UX	Strategie
Quelle: www.agux.co/blog/ux-strategy-goals-and-getting-to-the-future-state
Quelle: www.experiencinginformation.com/2014/08/12/ux-strategy-blueprint/
Elemente des UX Strategy Blueprints
• Challenges (welche Probleme müssen wir lösen)
• Aspirations (welches Ergebnis streben wir an)
• Focus Areas (welche Kunden/Märkte/Kanäle sind im Fokus)
• Guiding Principles (auf welche Prinzipen achten wir)
• Activities (welche Tätigkeiten fallen voraussichtlich an)
• Measurements (wie messen wir den Erfolg unserer Maßnahmen)
Wie misst man UX?
UX Metrics
Klassische KPIs der Versicherungsbranche
. Revenue per Policyholder
. Average cost per claim
. Average time to settle a claim
. Return on surplus
. Loss ratio
. Frequency
. Severity
. Average policy size
. …
Quelle: https://guidingmetrics.com/content/insurance-industrys-18-most-critical-metrics/
KPIs vs. UX - Ist User Experience messbar?
Quelle: https://innovationenglish.sites.ku.dk/files/2016/07/lEAN-startup_RKO.png
Unser Anliegen: Messung
der Performance von
Interaktionen
Einige der wichtigsten (quantitativen) UX Metriken
Statistische Auswertungen
• Task Success Rate
• Time on Task
• Verwendung der Suche vs. Navigation
• Error (Occurence) Rate
Umfrage
• System Usability Scale (SUS)
Task Success Rate (Task Completion Rate)
• Prozentueller Anteil erfolgreich abgeschlossener
Aufgaben durch den Nutzer
• Nur möglich wenn es ein klares Ziel oder Endpunkt gibt
(z.B. Schadensmeldung, Einrichten eines Accounts)
Anzahl erfolgreich abgeschlossener Aufgaben
Anzahl Versuche (gesamt)
Time On Task
• Wie lange benötigt einer Nutzer – in Minuten und
Sekunden ausgedrückt – um eine Aufgabe zu erledigen
• Üblicherweise betrachtet man den durchschnittlichen
Wert (z.B. Neukundenregistrierung 2:45 Min)
• Nützlich um Verbesserungen zwischen
Versionen/Iterationen zu bewerten
Suche vs. Navigation
• Bewertungskriterium für die Effektivität der
Informationsarchitektur bzw. Navigation
Anzahl erfolgreich abgeschlossener Aufgaben durch
Verwendung der Suche (Navigation)
Anzahl abgeschlossener Aufgaben (gesamt)
User Error Rate
• Guter Indikator im Hinblick auf die generelle
Verwendbarkeit eines Systems
• Hilfreich beim Auffinden versteckter Usability Issues
• Unterschiedliche Varianten möglich z.B. Error Occurrence
Rate (s. Beispiel unten)
Anzahl aufgetretener Fehler für alle Nutzer (gesamt)
Anzahl möglicher Fehler für alle Nutzer (gesamt)
Error Occurrence Rate (Beispiel)
• Fünf Benutzer haben eine Kreditkartenzahlung
durchgeführt. Es gibt sieben Stellen im Prozess an
denen bei der Eingabe Fehler gemacht werden können.
• Folgende Fehler wurden pro User verursacht: 2,4,1,2, und
3
• Die durchschnittliche Error Occurence Rate berechnet
sich folgendermaßen:
(2+4+1+2+3) / 7 * 5 = 0.34 à 34%
System Usability Scale (SUS)
• Keine Auswertung statistischer Nutzungsdaten sondern
Nutzer-Umfrage
• Etabliertes Werkzeug um die Verwendbarkeit und
Nützlichkeit eines Systems durch Nutzer bewerten zu
lassen
• Zehn Statements zu denen die Zustimmungswerte der
Nutzer erfasst werden (0–4 Punkte)
• Der maximale Score liegt bei 100 (Summe * 2,5)
• Ich kann mir sehr gut vorstellen, das System regelmäßig zu nutzen.
• Ich empfinde das System als unnötig komplex.
• Ich empfinde das System als einfach zu nutzen.
• Ich denke, dass ich technischen Support brauchen würde, um das System zu nutzen.
• Ich finde, dass die verschiedenen Funktionen des Systems gut integriert sind.
• Ich finde, dass es im System zu viele Inkonsistenzen gibt.
• Ich kann mir vorstellen, dass die meisten Leute das System schnell zu beherrschen lernen.
• Ich empfinde die Bedienung als sehr umständlich.
• Ich habe mich bei der Nutzung des Systems sehr sicher gefühlt.
• Ich musste eine Menge Dinge lernen, bevor ich mit dem System arbeiten konnte.
SUS-Score
Useful
Valuable
Credible
Desirable
Accessible
Usable
Findable
Quelle: http://semanticstudios.com/user_experience_design/
Wie messen wir Nützlichkeit, Attraktivitität und Glaubwürdigkeit
Metriken &
Customer
Lifecycles
Quelle: https://www.slideshare.net/brantcooper/customer-zoom-value-stream-discovery-and-market-segmentation
Acquisition
Activation
Retention
Referrals
Revenue
Pirate Metrics
Quelle: https://en.wikipedia.org/wiki/File:Piratey,_vector_version.svgQuelle: https://www.slideshare.net/dmc500hats/startup-metrics-for-pirates-long-version
KPIs vs. UX - Ist User Experience messbar?
Das wichtigste Werkzeug:
Empathie!
Zusammenfassung
• Gute UX schafft durch Verständigung zwischen
Nutzerbedürfnissen und Unternehmenszielen einen
Mehrwert für beide Seiten
• Um mittels UX Unternehmensziele befördern zu können
brauchen wir klare strategische Vorgaben und eine
genaue Vorstellung, was Erfolg für uns bedeutet
Zusammenfassung (2)
• Mit KPIs messen wir die betriebswirtschaftliche
Performance eines Unternehmens
• Mit UX Metriken messen wir die Performance von
Interaktionen (Usability)
• Statistische Auswertungen alleine reichen nicht aus
• Umfragen (z.B. SUS), Customer Lifecycles, User
Interviews vervollständigen das Bild im Hinblick auf
Kundenbedürfnisse
Ein Rat zum Schluss
Bevor wir mit
Verbesserungen
starten...
...messen wir die UX im
bestehenden System
Wir verbessern nur eine
Metrik pro Iteration!
Mehr zum Thema
Viel Erfolg beim Messen!
Fragen?
@matthiasfeit
Diese Ausarbeitung beinhaltet geistiges Eigentum von Die Firma GmbH und ist ausschließlich für
Präsentationszwecke bestimmt. Soweit die Ausarbeitung nicht durch eine vertragliche Vereinbarung in das
Eigentum des Kunden übergeht, kann jede Verwendung von Teilen der Konzeption, Design und der
zugrundeliegenden Ideen nur mit schriftlichem Einverständnis von Die Firma erfolgen. Eine Nutzung ohne
Vereinbarung bzw. Einverständnis ist nicht zulässig
(vgl. geltendes Urheber- und Nutzungsrecht) ebenso wie eine Weitergabe dieses Dokumentes an Dritte
(sowohl als Gesamtdokument wie auch in Auszügen).
Diese Ausarbeitung beinhaltet geistiges Eigentum von Die Firma GmbH und ist ausschließlich für
Präsentationszwecke bestimmt. Soweit die Ausarbeitung nicht durch eine vertragliche Vereinbarung in das
Eigentum des Kunden übergeht, kann jede Verwendung von Teilen der Konzeption, Design und der
zugrundeliegenden Ideen nur mit schriftlichem Einverständnis von Die Firma erfolgen. Eine Nutzung ohne
Vereinbarung bzw. Einverständnis ist nicht zulässig (vgl. geltendes Urheber- und Nutzungsrecht) ebenso wie
eine Weitergabe dieses Dokumentes an Dritte (sowohl als Gesamtdokument wie auch in Auszügen).
Schwalbacher Straße 78
D-65183 Wiesbaden
Tel +49 611 2385010
www.diefirma.de
@matthiasfeit
0611-2385012
m.feit@diefirma.de
Matthias Feit
Kontakt

Weitere ähnliche Inhalte

Was ist angesagt?

User story Mapping mit Exemplarischen Handlungsfeldern
User story Mapping mit Exemplarischen HandlungsfeldernUser story Mapping mit Exemplarischen Handlungsfeldern
User story Mapping mit Exemplarischen Handlungsfeldern
Screamin Wrba
 
Mit UX Thinking vom Mandat zur Produktvision
Mit UX Thinking vom Mandat zur ProduktvisionMit UX Thinking vom Mandat zur Produktvision
Mit UX Thinking vom Mandat zur Produktvision
Screamin Wrba
 
IA Konferenz 2016 - User Story Mapping
IA Konferenz 2016 - User Story MappingIA Konferenz 2016 - User Story Mapping
IA Konferenz 2016 - User Story Mapping
denkwerk GmbH
 
Über Service Design @ Plexgroup Open
Über Service Design @ Plexgroup OpenÜber Service Design @ Plexgroup Open
Über Service Design @ Plexgroup Open
Jens Otto Lange
 
UX-Metriken – überbewertet und unterschätzt
UX-Metriken – überbewertet und unterschätztUX-Metriken – überbewertet und unterschätzt
UX-Metriken – überbewertet und unterschätzt
Jens Jacobsen
 
Creating the bigger picture - Die Designvision in agilen Projekten
Creating the bigger picture - Die Designvision in agilen ProjektenCreating the bigger picture - Die Designvision in agilen Projekten
Creating the bigger picture - Die Designvision in agilen Projekten
Silke Kreiling
 
Ein Strategie für viele Marken - IA Konferenz 2016 - Berlin
Ein Strategie für viele Marken - IA Konferenz 2016 - BerlinEin Strategie für viele Marken - IA Konferenz 2016 - Berlin
Ein Strategie für viele Marken - IA Konferenz 2016 - Berlin
Lutz Schmitt
 
User Story Mapping in Practice
User Story Mapping in PracticeUser Story Mapping in Practice
User Story Mapping in Practice
Sandra Griffel
 
UX Erklaert 01 / UX Overview 01
UX Erklaert 01 / UX Overview 01UX Erklaert 01 / UX Overview 01
UX Erklaert 01 / UX Overview 01
MJ K
 
Digital Experience for Pharma and Healthcare @ pharmaplace 2016
Digital Experience for Pharma and Healthcare @ pharmaplace 2016Digital Experience for Pharma and Healthcare @ pharmaplace 2016
Digital Experience for Pharma and Healthcare @ pharmaplace 2016
Christian Paul Stobbe
 
Uability und User Experience - Ein bisschen darüber geplaudert ...
Uability und User Experience - Ein bisschen darüber geplaudert ...Uability und User Experience - Ein bisschen darüber geplaudert ...
Uability und User Experience - Ein bisschen darüber geplaudert ...
Maria Rauschenberger
 
Show, don't tell @ UIG Frühjahrstagung Mannheim 2016
Show, don't tell @ UIG Frühjahrstagung Mannheim 2016 Show, don't tell @ UIG Frühjahrstagung Mannheim 2016
Show, don't tell @ UIG Frühjahrstagung Mannheim 2016
Christian Paul Stobbe
 
Digital Experience @ CeBIT 2016
Digital Experience @ CeBIT 2016Digital Experience @ CeBIT 2016
Digital Experience @ CeBIT 2016
Christian Paul Stobbe
 
UX-Methoden im Projektmanagement
UX-Methoden im ProjektmanagementUX-Methoden im Projektmanagement
UX-Methoden im Projektmanagement
Uwe Thimel
 

Was ist angesagt? (14)

User story Mapping mit Exemplarischen Handlungsfeldern
User story Mapping mit Exemplarischen HandlungsfeldernUser story Mapping mit Exemplarischen Handlungsfeldern
User story Mapping mit Exemplarischen Handlungsfeldern
 
Mit UX Thinking vom Mandat zur Produktvision
Mit UX Thinking vom Mandat zur ProduktvisionMit UX Thinking vom Mandat zur Produktvision
Mit UX Thinking vom Mandat zur Produktvision
 
IA Konferenz 2016 - User Story Mapping
IA Konferenz 2016 - User Story MappingIA Konferenz 2016 - User Story Mapping
IA Konferenz 2016 - User Story Mapping
 
Über Service Design @ Plexgroup Open
Über Service Design @ Plexgroup OpenÜber Service Design @ Plexgroup Open
Über Service Design @ Plexgroup Open
 
UX-Metriken – überbewertet und unterschätzt
UX-Metriken – überbewertet und unterschätztUX-Metriken – überbewertet und unterschätzt
UX-Metriken – überbewertet und unterschätzt
 
Creating the bigger picture - Die Designvision in agilen Projekten
Creating the bigger picture - Die Designvision in agilen ProjektenCreating the bigger picture - Die Designvision in agilen Projekten
Creating the bigger picture - Die Designvision in agilen Projekten
 
Ein Strategie für viele Marken - IA Konferenz 2016 - Berlin
Ein Strategie für viele Marken - IA Konferenz 2016 - BerlinEin Strategie für viele Marken - IA Konferenz 2016 - Berlin
Ein Strategie für viele Marken - IA Konferenz 2016 - Berlin
 
User Story Mapping in Practice
User Story Mapping in PracticeUser Story Mapping in Practice
User Story Mapping in Practice
 
UX Erklaert 01 / UX Overview 01
UX Erklaert 01 / UX Overview 01UX Erklaert 01 / UX Overview 01
UX Erklaert 01 / UX Overview 01
 
Digital Experience for Pharma and Healthcare @ pharmaplace 2016
Digital Experience for Pharma and Healthcare @ pharmaplace 2016Digital Experience for Pharma and Healthcare @ pharmaplace 2016
Digital Experience for Pharma and Healthcare @ pharmaplace 2016
 
Uability und User Experience - Ein bisschen darüber geplaudert ...
Uability und User Experience - Ein bisschen darüber geplaudert ...Uability und User Experience - Ein bisschen darüber geplaudert ...
Uability und User Experience - Ein bisschen darüber geplaudert ...
 
Show, don't tell @ UIG Frühjahrstagung Mannheim 2016
Show, don't tell @ UIG Frühjahrstagung Mannheim 2016 Show, don't tell @ UIG Frühjahrstagung Mannheim 2016
Show, don't tell @ UIG Frühjahrstagung Mannheim 2016
 
Digital Experience @ CeBIT 2016
Digital Experience @ CeBIT 2016Digital Experience @ CeBIT 2016
Digital Experience @ CeBIT 2016
 
UX-Methoden im Projektmanagement
UX-Methoden im ProjektmanagementUX-Methoden im Projektmanagement
UX-Methoden im Projektmanagement
 

Ähnlich wie KPIs vs. UX - Ist User Experience messbar?

USECON_RoX_Workshop_Experience-Strategy_und_Change
USECON_RoX_Workshop_Experience-Strategy_und_ChangeUSECON_RoX_Workshop_Experience-Strategy_und_Change
USECON_RoX_Workshop_Experience-Strategy_und_Change
USECON
 
TWT Usability Testing
TWT Usability Testing TWT Usability Testing
TWT Usability Testing
TWT
 
Fallstudie eResult User Experience Review - NOZ
Fallstudie eResult User Experience Review - NOZFallstudie eResult User Experience Review - NOZ
Fallstudie eResult User Experience Review - NOZ
eResult_GmbH
 
BTEXX Fachartikel: UCD – Formel für bessere Intranets?
BTEXX Fachartikel: UCD – Formel für bessere Intranets?BTEXX Fachartikel: UCD – Formel für bessere Intranets?
BTEXX Fachartikel: UCD – Formel für bessere Intranets?
BTEXX GmbH
 
Grundlagen Webanalytics - Gründerszene
Grundlagen Webanalytics - GründerszeneGrundlagen Webanalytics - Gründerszene
Grundlagen Webanalytics - Gründerszene
André Scharf
 
USECON and QuestBack Case Study
USECON and QuestBack Case Study USECON and QuestBack Case Study
USECON and QuestBack Case Study
USECON
 
UX muss in die Zukunft schauen
UX muss in die Zukunft schauenUX muss in die Zukunft schauen
UX muss in die Zukunft schauen
Me & Company GmbH
 
User-Experience in Echtzeit messen (USECON & QuestBack Case Study)
User-Experience in Echtzeit messen (USECON & QuestBack Case Study)User-Experience in Echtzeit messen (USECON & QuestBack Case Study)
User-Experience in Echtzeit messen (USECON & QuestBack Case Study)
USECON
 
German UPA Konferenz - Der IxD Baukasten
German UPA Konferenz - Der IxD BaukastenGerman UPA Konferenz - Der IxD Baukasten
German UPA Konferenz - Der IxD Baukasten
USECON
 
Wie steigere ich die Effizienz und Zufriedenheit meiner Mitarbeiter
Wie steigere ich die Effizienz und Zufriedenheit meiner MitarbeiterWie steigere ich die Effizienz und Zufriedenheit meiner Mitarbeiter
Wie steigere ich die Effizienz und Zufriedenheit meiner Mitarbeiter
Thomas Jenewein
 
Der Weg zum nutzerzentrierten Unternehmen
Der Weg zum nutzerzentrierten UnternehmenDer Weg zum nutzerzentrierten Unternehmen
Der Weg zum nutzerzentrierten Unternehmen
Prof. Dr. Alexander Maedche
 
Agile UX - Wege zur agilen nutzerzentrierten Produktentwicklung
Agile UX - Wege zur agilen nutzerzentrierten ProduktentwicklungAgile UX - Wege zur agilen nutzerzentrierten Produktentwicklung
Agile UX - Wege zur agilen nutzerzentrierten Produktentwicklung
Rainer Gibbert
 
Erfolgsfaktoren für langfristige Implementierungen.pdf
Erfolgsfaktoren für langfristige Implementierungen.pdfErfolgsfaktoren für langfristige Implementierungen.pdf
Erfolgsfaktoren für langfristige Implementierungen.pdf
Cristina Vidu
 
Mit Usability und User Experience zur intuitiven CRM Anwendung
Mit Usability und User Experience zur intuitiven CRM AnwendungMit Usability und User Experience zur intuitiven CRM Anwendung
Mit Usability und User Experience zur intuitiven CRM Anwendung
USECON
 
Erschließen Sie neue Geschäfts­­chancen durch optimierte, automatisierte und ...
Erschließen Sie neue Geschäfts­­chancen durch optimierte, automatisierte und ...Erschließen Sie neue Geschäfts­­chancen durch optimierte, automatisierte und ...
Erschließen Sie neue Geschäfts­­chancen durch optimierte, automatisierte und ...
Wolfgang Schmidt
 
Xidra 2016 DevOps
Xidra 2016 DevOpsXidra 2016 DevOps
Xidra 2016 DevOps
Eduard van den Bongard
 
DevDay 2016 Keynote - Die Evolution agiler Software Entwicklung
DevDay 2016 Keynote - Die Evolution agiler Software EntwicklungDevDay 2016 Keynote - Die Evolution agiler Software Entwicklung
DevDay 2016 Keynote - Die Evolution agiler Software Entwicklung
Marc Müller
 
Navigator im Compliance-Dickicht - computerworld.ch - Matthias Leisi
Navigator im Compliance-Dickicht - computerworld.ch - Matthias LeisiNavigator im Compliance-Dickicht - computerworld.ch - Matthias Leisi
Navigator im Compliance-Dickicht - computerworld.ch - Matthias Leisi
Matthias Leisi
 
Wertschöpfung durch ITIL®-Prozesse
Wertschöpfung durch ITIL®-ProzesseWertschöpfung durch ITIL®-Prozesse
Wertschöpfung durch ITIL®-Prozesse
Digicomp Academy AG
 

Ähnlich wie KPIs vs. UX - Ist User Experience messbar? (20)

USECON_RoX_Workshop_Experience-Strategy_und_Change
USECON_RoX_Workshop_Experience-Strategy_und_ChangeUSECON_RoX_Workshop_Experience-Strategy_und_Change
USECON_RoX_Workshop_Experience-Strategy_und_Change
 
TWT Usability Testing
TWT Usability Testing TWT Usability Testing
TWT Usability Testing
 
Fallstudie eResult User Experience Review - NOZ
Fallstudie eResult User Experience Review - NOZFallstudie eResult User Experience Review - NOZ
Fallstudie eResult User Experience Review - NOZ
 
BTEXX Fachartikel: UCD – Formel für bessere Intranets?
BTEXX Fachartikel: UCD – Formel für bessere Intranets?BTEXX Fachartikel: UCD – Formel für bessere Intranets?
BTEXX Fachartikel: UCD – Formel für bessere Intranets?
 
Grundlagen Webanalytics - Gründerszene
Grundlagen Webanalytics - GründerszeneGrundlagen Webanalytics - Gründerszene
Grundlagen Webanalytics - Gründerszene
 
USECON and QuestBack Case Study
USECON and QuestBack Case Study USECON and QuestBack Case Study
USECON and QuestBack Case Study
 
UX muss in die Zukunft schauen
UX muss in die Zukunft schauenUX muss in die Zukunft schauen
UX muss in die Zukunft schauen
 
User-Experience in Echtzeit messen (USECON & QuestBack Case Study)
User-Experience in Echtzeit messen (USECON & QuestBack Case Study)User-Experience in Echtzeit messen (USECON & QuestBack Case Study)
User-Experience in Echtzeit messen (USECON & QuestBack Case Study)
 
German UPA Konferenz - Der IxD Baukasten
German UPA Konferenz - Der IxD BaukastenGerman UPA Konferenz - Der IxD Baukasten
German UPA Konferenz - Der IxD Baukasten
 
Wie steigere ich die Effizienz und Zufriedenheit meiner Mitarbeiter
Wie steigere ich die Effizienz und Zufriedenheit meiner MitarbeiterWie steigere ich die Effizienz und Zufriedenheit meiner Mitarbeiter
Wie steigere ich die Effizienz und Zufriedenheit meiner Mitarbeiter
 
Der Weg zum nutzerzentrierten Unternehmen
Der Weg zum nutzerzentrierten UnternehmenDer Weg zum nutzerzentrierten Unternehmen
Der Weg zum nutzerzentrierten Unternehmen
 
Agile UX - Wege zur agilen nutzerzentrierten Produktentwicklung
Agile UX - Wege zur agilen nutzerzentrierten ProduktentwicklungAgile UX - Wege zur agilen nutzerzentrierten Produktentwicklung
Agile UX - Wege zur agilen nutzerzentrierten Produktentwicklung
 
Erfolgsfaktoren für langfristige Implementierungen.pdf
Erfolgsfaktoren für langfristige Implementierungen.pdfErfolgsfaktoren für langfristige Implementierungen.pdf
Erfolgsfaktoren für langfristige Implementierungen.pdf
 
Mit Usability und User Experience zur intuitiven CRM Anwendung
Mit Usability und User Experience zur intuitiven CRM AnwendungMit Usability und User Experience zur intuitiven CRM Anwendung
Mit Usability und User Experience zur intuitiven CRM Anwendung
 
Erschließen Sie neue Geschäfts­­chancen durch optimierte, automatisierte und ...
Erschließen Sie neue Geschäfts­­chancen durch optimierte, automatisierte und ...Erschließen Sie neue Geschäfts­­chancen durch optimierte, automatisierte und ...
Erschließen Sie neue Geschäfts­­chancen durch optimierte, automatisierte und ...
 
2010 09 30 13-00 prof dieter fischer
2010 09 30 13-00 prof dieter fischer2010 09 30 13-00 prof dieter fischer
2010 09 30 13-00 prof dieter fischer
 
Xidra 2016 DevOps
Xidra 2016 DevOpsXidra 2016 DevOps
Xidra 2016 DevOps
 
DevDay 2016 Keynote - Die Evolution agiler Software Entwicklung
DevDay 2016 Keynote - Die Evolution agiler Software EntwicklungDevDay 2016 Keynote - Die Evolution agiler Software Entwicklung
DevDay 2016 Keynote - Die Evolution agiler Software Entwicklung
 
Navigator im Compliance-Dickicht - computerworld.ch - Matthias Leisi
Navigator im Compliance-Dickicht - computerworld.ch - Matthias LeisiNavigator im Compliance-Dickicht - computerworld.ch - Matthias Leisi
Navigator im Compliance-Dickicht - computerworld.ch - Matthias Leisi
 
Wertschöpfung durch ITIL®-Prozesse
Wertschöpfung durch ITIL®-ProzesseWertschöpfung durch ITIL®-Prozesse
Wertschöpfung durch ITIL®-Prozesse
 

Mehr von die firma . experience design GmbH

Mapping The JobTo Be Done
Mapping The JobTo Be DoneMapping The JobTo Be Done
Mapping The JobTo Be Done
die firma . experience design GmbH
 
Startup 101
Startup 101Startup 101
Future Work – Wie Arbeit sich wandelt
Future Work – Wie Arbeit sich wandeltFuture Work – Wie Arbeit sich wandelt
Future Work – Wie Arbeit sich wandelt
die firma . experience design GmbH
 
Design Sprints – In fünf Tagen von der Hypothese zum belastbaren Ergebnis
Design Sprints – In fünf Tagen von der Hypothese zum belastbaren ErgebnisDesign Sprints – In fünf Tagen von der Hypothese zum belastbaren Ergebnis
Design Sprints – In fünf Tagen von der Hypothese zum belastbaren Ergebnis
die firma . experience design GmbH
 
Jobs to be Done - What the j**?
Jobs to be Done - What the j**?Jobs to be Done - What the j**?
Jobs to be Done - What the j**?
die firma . experience design GmbH
 
Vortrag Hochschule RheinMain // Thema Digitale Transformation
Vortrag Hochschule RheinMain // Thema Digitale TransformationVortrag Hochschule RheinMain // Thema Digitale Transformation
Vortrag Hochschule RheinMain // Thema Digitale Transformation
die firma . experience design GmbH
 
Digital Finance - Die nächste Runde im Rennen um die Kunden ist eingeläutet
Digital Finance - Die nächste Runde im Rennen um die Kunden ist eingeläutetDigital Finance - Die nächste Runde im Rennen um die Kunden ist eingeläutet
Digital Finance - Die nächste Runde im Rennen um die Kunden ist eingeläutet
die firma . experience design GmbH
 
Trendpaper: Moving Image - Videoinhalte bringen mehr Bewegung ins Content Mar...
Trendpaper: Moving Image - Videoinhalte bringen mehr Bewegung ins Content Mar...Trendpaper: Moving Image - Videoinhalte bringen mehr Bewegung ins Content Mar...
Trendpaper: Moving Image - Videoinhalte bringen mehr Bewegung ins Content Mar...
die firma . experience design GmbH
 
diefirma gmbh webthinking® Quickguide
diefirma gmbh webthinking® Quickguide diefirma gmbh webthinking® Quickguide
diefirma gmbh webthinking® Quickguide
die firma . experience design GmbH
 
Digital Finance: Banken auf dem Weg zum Digital Leader
Digital Finance: Banken auf dem Weg zum Digital LeaderDigital Finance: Banken auf dem Weg zum Digital Leader
Digital Finance: Banken auf dem Weg zum Digital Leader
die firma . experience design GmbH
 
Trends Digital Health - Die Firma
Trends Digital Health - Die FirmaTrends Digital Health - Die Firma
Trends Digital Health - Die Firma
die firma . experience design GmbH
 
B2B Online-Monitor 2014 - Präsentation - Die wichtigsten Ergebnisse
B2B Online-Monitor 2014 - Präsentation - Die wichtigsten ErgebnisseB2B Online-Monitor 2014 - Präsentation - Die wichtigsten Ergebnisse
B2B Online-Monitor 2014 - Präsentation - Die wichtigsten Ergebnisse
die firma . experience design GmbH
 
B2B Online-Monitor 2014 - Kings of Content
B2B Online-Monitor 2014 - Kings of ContentB2B Online-Monitor 2014 - Kings of Content
B2B Online-Monitor 2014 - Kings of Content
die firma . experience design GmbH
 
B2B Online-Monitor 2014 - Infografik - Die wichtigsten Ergebnisse
B2B Online-Monitor 2014 - Infografik - Die wichtigsten ErgebnisseB2B Online-Monitor 2014 - Infografik - Die wichtigsten Ergebnisse
B2B Online-Monitor 2014 - Infografik - Die wichtigsten Ergebnisse
die firma . experience design GmbH
 
Story Design - Methoden, Tools und Werkzeuge für eine gelungene Content-Strat...
Story Design - Methoden, Tools und Werkzeuge für eine gelungene Content-Strat...Story Design - Methoden, Tools und Werkzeuge für eine gelungene Content-Strat...
Story Design - Methoden, Tools und Werkzeuge für eine gelungene Content-Strat...
die firma . experience design GmbH
 
Trendpaper Social Media - Was kommt nach dem Hype?
Trendpaper Social Media - Was kommt nach dem Hype?Trendpaper Social Media - Was kommt nach dem Hype?
Trendpaper Social Media - Was kommt nach dem Hype?
die firma . experience design GmbH
 
Infografik zum B2B Online-Monitor 2013
Infografik zum B2B Online-Monitor 2013Infografik zum B2B Online-Monitor 2013
Infografik zum B2B Online-Monitor 2013
die firma . experience design GmbH
 
Digital Leadership - Überlebensstrategien für Finanzdienstleister
Digital Leadership - Überlebensstrategien für FinanzdienstleisterDigital Leadership - Überlebensstrategien für Finanzdienstleister
Digital Leadership - Überlebensstrategien für Finanzdienstleister
die firma . experience design GmbH
 
B2B Online-Monitor 2013 - Die wichtigsten Ergebnisse!
B2B Online-Monitor 2013 - Die wichtigsten Ergebnisse!B2B Online-Monitor 2013 - Die wichtigsten Ergebnisse!
B2B Online-Monitor 2013 - Die wichtigsten Ergebnisse!
die firma . experience design GmbH
 
Webthinking "Digitale Strategien" - Präsentation von Marco Fischer von Die Fi...
Webthinking "Digitale Strategien" - Präsentation von Marco Fischer von Die Fi...Webthinking "Digitale Strategien" - Präsentation von Marco Fischer von Die Fi...
Webthinking "Digitale Strategien" - Präsentation von Marco Fischer von Die Fi...
die firma . experience design GmbH
 

Mehr von die firma . experience design GmbH (20)

Mapping The JobTo Be Done
Mapping The JobTo Be DoneMapping The JobTo Be Done
Mapping The JobTo Be Done
 
Startup 101
Startup 101Startup 101
Startup 101
 
Future Work – Wie Arbeit sich wandelt
Future Work – Wie Arbeit sich wandeltFuture Work – Wie Arbeit sich wandelt
Future Work – Wie Arbeit sich wandelt
 
Design Sprints – In fünf Tagen von der Hypothese zum belastbaren Ergebnis
Design Sprints – In fünf Tagen von der Hypothese zum belastbaren ErgebnisDesign Sprints – In fünf Tagen von der Hypothese zum belastbaren Ergebnis
Design Sprints – In fünf Tagen von der Hypothese zum belastbaren Ergebnis
 
Jobs to be Done - What the j**?
Jobs to be Done - What the j**?Jobs to be Done - What the j**?
Jobs to be Done - What the j**?
 
Vortrag Hochschule RheinMain // Thema Digitale Transformation
Vortrag Hochschule RheinMain // Thema Digitale TransformationVortrag Hochschule RheinMain // Thema Digitale Transformation
Vortrag Hochschule RheinMain // Thema Digitale Transformation
 
Digital Finance - Die nächste Runde im Rennen um die Kunden ist eingeläutet
Digital Finance - Die nächste Runde im Rennen um die Kunden ist eingeläutetDigital Finance - Die nächste Runde im Rennen um die Kunden ist eingeläutet
Digital Finance - Die nächste Runde im Rennen um die Kunden ist eingeläutet
 
Trendpaper: Moving Image - Videoinhalte bringen mehr Bewegung ins Content Mar...
Trendpaper: Moving Image - Videoinhalte bringen mehr Bewegung ins Content Mar...Trendpaper: Moving Image - Videoinhalte bringen mehr Bewegung ins Content Mar...
Trendpaper: Moving Image - Videoinhalte bringen mehr Bewegung ins Content Mar...
 
diefirma gmbh webthinking® Quickguide
diefirma gmbh webthinking® Quickguide diefirma gmbh webthinking® Quickguide
diefirma gmbh webthinking® Quickguide
 
Digital Finance: Banken auf dem Weg zum Digital Leader
Digital Finance: Banken auf dem Weg zum Digital LeaderDigital Finance: Banken auf dem Weg zum Digital Leader
Digital Finance: Banken auf dem Weg zum Digital Leader
 
Trends Digital Health - Die Firma
Trends Digital Health - Die FirmaTrends Digital Health - Die Firma
Trends Digital Health - Die Firma
 
B2B Online-Monitor 2014 - Präsentation - Die wichtigsten Ergebnisse
B2B Online-Monitor 2014 - Präsentation - Die wichtigsten ErgebnisseB2B Online-Monitor 2014 - Präsentation - Die wichtigsten Ergebnisse
B2B Online-Monitor 2014 - Präsentation - Die wichtigsten Ergebnisse
 
B2B Online-Monitor 2014 - Kings of Content
B2B Online-Monitor 2014 - Kings of ContentB2B Online-Monitor 2014 - Kings of Content
B2B Online-Monitor 2014 - Kings of Content
 
B2B Online-Monitor 2014 - Infografik - Die wichtigsten Ergebnisse
B2B Online-Monitor 2014 - Infografik - Die wichtigsten ErgebnisseB2B Online-Monitor 2014 - Infografik - Die wichtigsten Ergebnisse
B2B Online-Monitor 2014 - Infografik - Die wichtigsten Ergebnisse
 
Story Design - Methoden, Tools und Werkzeuge für eine gelungene Content-Strat...
Story Design - Methoden, Tools und Werkzeuge für eine gelungene Content-Strat...Story Design - Methoden, Tools und Werkzeuge für eine gelungene Content-Strat...
Story Design - Methoden, Tools und Werkzeuge für eine gelungene Content-Strat...
 
Trendpaper Social Media - Was kommt nach dem Hype?
Trendpaper Social Media - Was kommt nach dem Hype?Trendpaper Social Media - Was kommt nach dem Hype?
Trendpaper Social Media - Was kommt nach dem Hype?
 
Infografik zum B2B Online-Monitor 2013
Infografik zum B2B Online-Monitor 2013Infografik zum B2B Online-Monitor 2013
Infografik zum B2B Online-Monitor 2013
 
Digital Leadership - Überlebensstrategien für Finanzdienstleister
Digital Leadership - Überlebensstrategien für FinanzdienstleisterDigital Leadership - Überlebensstrategien für Finanzdienstleister
Digital Leadership - Überlebensstrategien für Finanzdienstleister
 
B2B Online-Monitor 2013 - Die wichtigsten Ergebnisse!
B2B Online-Monitor 2013 - Die wichtigsten Ergebnisse!B2B Online-Monitor 2013 - Die wichtigsten Ergebnisse!
B2B Online-Monitor 2013 - Die wichtigsten Ergebnisse!
 
Webthinking "Digitale Strategien" - Präsentation von Marco Fischer von Die Fi...
Webthinking "Digitale Strategien" - Präsentation von Marco Fischer von Die Fi...Webthinking "Digitale Strategien" - Präsentation von Marco Fischer von Die Fi...
Webthinking "Digitale Strategien" - Präsentation von Marco Fischer von Die Fi...
 

KPIs vs. UX - Ist User Experience messbar?

  • 1. KPIs vs. UX Ist User Experience messbar? die firma . experience design / Matthias Feit
  • 2. „Mit dem engl. Begriff key performance indicators (KPI) werden in der Betriebswirtschaftslehre allgemeine Kennzahlen bezeichnet, die sich auf den Erfolg, die Leistung oder Auslastung des Betriebs, seiner einzelnen organisatorischen Einheiten oder einer Maschine beziehen“ http://wirtschaftslexikon.gabler.de/Definition/key-performance-indicator-kpi.html
  • 3. Taylorismus // Industriezeitalter Weite Märkte Wenig Konkurrenz Lineare Systeme Steuerung durch KPIs
  • 4. Post-Taylorismus // Wissenszeitalter Digitalisierung = Nicht-Lineare Systeme = Komplexität Enge globale Märkte Viel Konkurrenz
  • 6. „User experience encompasses all aspects of the end-user's interaction with the company, its services, and its products.“ – Don Norman, Jakob Nielsen https://www.nngroup.com/articles/definition-user-experience/
  • 13. Elemente des UX Strategy Blueprints • Challenges (welche Probleme müssen wir lösen) • Aspirations (welches Ergebnis streben wir an) • Focus Areas (welche Kunden/Märkte/Kanäle sind im Fokus) • Guiding Principles (auf welche Prinzipen achten wir) • Activities (welche Tätigkeiten fallen voraussichtlich an) • Measurements (wie messen wir den Erfolg unserer Maßnahmen)
  • 14. Wie misst man UX? UX Metrics
  • 15. Klassische KPIs der Versicherungsbranche . Revenue per Policyholder . Average cost per claim . Average time to settle a claim . Return on surplus . Loss ratio . Frequency . Severity . Average policy size . … Quelle: https://guidingmetrics.com/content/insurance-industrys-18-most-critical-metrics/
  • 18. Unser Anliegen: Messung der Performance von Interaktionen
  • 19. Einige der wichtigsten (quantitativen) UX Metriken Statistische Auswertungen • Task Success Rate • Time on Task • Verwendung der Suche vs. Navigation • Error (Occurence) Rate Umfrage • System Usability Scale (SUS)
  • 20. Task Success Rate (Task Completion Rate) • Prozentueller Anteil erfolgreich abgeschlossener Aufgaben durch den Nutzer • Nur möglich wenn es ein klares Ziel oder Endpunkt gibt (z.B. Schadensmeldung, Einrichten eines Accounts) Anzahl erfolgreich abgeschlossener Aufgaben Anzahl Versuche (gesamt)
  • 21. Time On Task • Wie lange benötigt einer Nutzer – in Minuten und Sekunden ausgedrückt – um eine Aufgabe zu erledigen • Üblicherweise betrachtet man den durchschnittlichen Wert (z.B. Neukundenregistrierung 2:45 Min) • Nützlich um Verbesserungen zwischen Versionen/Iterationen zu bewerten
  • 22. Suche vs. Navigation • Bewertungskriterium für die Effektivität der Informationsarchitektur bzw. Navigation Anzahl erfolgreich abgeschlossener Aufgaben durch Verwendung der Suche (Navigation) Anzahl abgeschlossener Aufgaben (gesamt)
  • 23. User Error Rate • Guter Indikator im Hinblick auf die generelle Verwendbarkeit eines Systems • Hilfreich beim Auffinden versteckter Usability Issues • Unterschiedliche Varianten möglich z.B. Error Occurrence Rate (s. Beispiel unten) Anzahl aufgetretener Fehler für alle Nutzer (gesamt) Anzahl möglicher Fehler für alle Nutzer (gesamt)
  • 24. Error Occurrence Rate (Beispiel) • Fünf Benutzer haben eine Kreditkartenzahlung durchgeführt. Es gibt sieben Stellen im Prozess an denen bei der Eingabe Fehler gemacht werden können. • Folgende Fehler wurden pro User verursacht: 2,4,1,2, und 3 • Die durchschnittliche Error Occurence Rate berechnet sich folgendermaßen: (2+4+1+2+3) / 7 * 5 = 0.34 à 34%
  • 25. System Usability Scale (SUS) • Keine Auswertung statistischer Nutzungsdaten sondern Nutzer-Umfrage • Etabliertes Werkzeug um die Verwendbarkeit und Nützlichkeit eines Systems durch Nutzer bewerten zu lassen • Zehn Statements zu denen die Zustimmungswerte der Nutzer erfasst werden (0–4 Punkte) • Der maximale Score liegt bei 100 (Summe * 2,5)
  • 26. • Ich kann mir sehr gut vorstellen, das System regelmäßig zu nutzen. • Ich empfinde das System als unnötig komplex. • Ich empfinde das System als einfach zu nutzen. • Ich denke, dass ich technischen Support brauchen würde, um das System zu nutzen. • Ich finde, dass die verschiedenen Funktionen des Systems gut integriert sind. • Ich finde, dass es im System zu viele Inkonsistenzen gibt. • Ich kann mir vorstellen, dass die meisten Leute das System schnell zu beherrschen lernen. • Ich empfinde die Bedienung als sehr umständlich. • Ich habe mich bei der Nutzung des Systems sehr sicher gefühlt. • Ich musste eine Menge Dinge lernen, bevor ich mit dem System arbeiten konnte.
  • 29. Wie messen wir Nützlichkeit, Attraktivitität und Glaubwürdigkeit Metriken & Customer Lifecycles
  • 34. Zusammenfassung • Gute UX schafft durch Verständigung zwischen Nutzerbedürfnissen und Unternehmenszielen einen Mehrwert für beide Seiten • Um mittels UX Unternehmensziele befördern zu können brauchen wir klare strategische Vorgaben und eine genaue Vorstellung, was Erfolg für uns bedeutet
  • 35. Zusammenfassung (2) • Mit KPIs messen wir die betriebswirtschaftliche Performance eines Unternehmens • Mit UX Metriken messen wir die Performance von Interaktionen (Usability) • Statistische Auswertungen alleine reichen nicht aus • Umfragen (z.B. SUS), Customer Lifecycles, User Interviews vervollständigen das Bild im Hinblick auf Kundenbedürfnisse
  • 36. Ein Rat zum Schluss Bevor wir mit Verbesserungen starten...
  • 37. ...messen wir die UX im bestehenden System
  • 38. Wir verbessern nur eine Metrik pro Iteration!
  • 40. Viel Erfolg beim Messen! Fragen? @matthiasfeit
  • 41. Diese Ausarbeitung beinhaltet geistiges Eigentum von Die Firma GmbH und ist ausschließlich für Präsentationszwecke bestimmt. Soweit die Ausarbeitung nicht durch eine vertragliche Vereinbarung in das Eigentum des Kunden übergeht, kann jede Verwendung von Teilen der Konzeption, Design und der zugrundeliegenden Ideen nur mit schriftlichem Einverständnis von Die Firma erfolgen. Eine Nutzung ohne Vereinbarung bzw. Einverständnis ist nicht zulässig (vgl. geltendes Urheber- und Nutzungsrecht) ebenso wie eine Weitergabe dieses Dokumentes an Dritte (sowohl als Gesamtdokument wie auch in Auszügen). Diese Ausarbeitung beinhaltet geistiges Eigentum von Die Firma GmbH und ist ausschließlich für Präsentationszwecke bestimmt. Soweit die Ausarbeitung nicht durch eine vertragliche Vereinbarung in das Eigentum des Kunden übergeht, kann jede Verwendung von Teilen der Konzeption, Design und der zugrundeliegenden Ideen nur mit schriftlichem Einverständnis von Die Firma erfolgen. Eine Nutzung ohne Vereinbarung bzw. Einverständnis ist nicht zulässig (vgl. geltendes Urheber- und Nutzungsrecht) ebenso wie eine Weitergabe dieses Dokumentes an Dritte (sowohl als Gesamtdokument wie auch in Auszügen). Schwalbacher Straße 78 D-65183 Wiesbaden Tel +49 611 2385010 www.diefirma.de @matthiasfeit 0611-2385012 m.feit@diefirma.de Matthias Feit Kontakt