Wie man wissenschaftlich korrekt und pragmatisch UX misst & darstellt, ohne Stakeholder vor den Kopf zu stoßen.

1. Jens Jacobsen
benutzerfreun.de
@benutzerfreund
UX-Metriken – überbewertet und
unterschätzt
IA Konferenz 2018, 8.6.2018
Wie man wissenschaftlich korrekt und
pragmatisch UX misst & darstellt, ohne
Stakeholder vor den Kopf zu stoßen.

2. 1 657 8,999 746 1,7 0 809.789,986
3,1415 6,022 4 9,999999999 1,0
74.688 2 9,4567 1.989.989.432.983
33 77 878 666 0,00000000001 3
33.493.492.398.001.987 9,234 4 666
69 44,409833 45.459 7 98 36,98486
6 555.459.098 1.000.000 23,488930 9

6. Woher kommt der Wunsch, zu messen?

7. 100 Millionen UXler
bis 2050!

9. Designer
Projektmanager
Marketingleiter
Kunde
Nutzer
Coder

14. Warum messen?

15. Gründe fürs Messen von UX
•Rechtfertigung der Kosten
•Vergleichbarkeit der Ergebnisse

16. ROI
– Return on Investment

18. I’ve been pitching our services for 23 years
and I’ve never once successfully convinced an
executive of anything.
Jared Spool, 2011

19. Schöne Metriken

20. vorher – nachher

21. Unsere Fehler beim Umgang mit Metriken:

22. Wir wissen zu wenig.

24. Wir haben zu wenig Empathie.

25. Kennen wir unsere
Stakeholder?

26. Warum wollen die Metriken?

29. Wir hinterfragen zu wenig.

31. Wir fragen falsch.

33. 1.Wie glücklich würdest du dich insgesamt
auf einer Skala von
1 (sehr glücklich) bis 7 (sehr unglücklich)
einschätzen?
2.Wie glücklich würdest du dich im Beruf
auf einer Skala von 1 (sehr glücklich) bis
7 (sehr unglücklich) einschätzen?

34. 1.Wie glücklich würdest du dich im Beruf
auf einer Skala von 1 (sehr glücklich) bis
7 (sehr unglücklich) einschätzen?
2.Wie glücklich würdest du dich insgesamt
auf einer Skala von
1 (sehr glücklich) bis 7 (sehr unglücklich)
einschätzen?

35. Wir picken zu wenig Rosinen.

39. Metrik-Vorschläge.

40. SEQ – Single Ease Question

41. Die Frage:
• Wie leicht war das?

42. SUS – System Usability Scale

43. Die 10 Aussagen:
• Ich denke, dass ich dieses System gerne häufiger nutzen würde.
• Ich fand das System unnötig komplex.
• Ich denke, das System war leicht zu benutzen.
• Ich denke, ich bräuchte die Unterstützung einer technisch versierten
Person, um das System benutzen zu können.
• Ich fand, die verschiedenen Funktionen des Systems waren gut
aufeinander abgestimmt.
• Ich halte das System für zu inkonsistent.
• Ich glaube, die meisten Menschen könnten sehr schnell lernen, mit
dem System umzugehen.
• Ich fand das System sehr umständlich zu benutzen.
• Ich fühlte mich bei der Nutzung des Systems sehr sicher.
• Ich musste vieles lernen, bevor ich mit dem System zurechtkam.

44. SUPR-Q – Standardized User
Experience Percentile Rank
Questionnaire

45. NASA-TLX – Task Load Index

47. Die Fragen:
• Wie anspruchsvoll war die Aufgabe geistig?
• Wie anspruchsvoll war die Aufgabe körperlich?
• Wie groß war der Zeitdruck während der Aufgabe?
• Wie erfolgreich haben Sie die Aufgabe abgeschlossen?
• Wie sehr mussten Sie sich anstrengen, dieses Niveau zu
erreichen?
• Wie unsicher, entmutigt, irritiert, gestresst und ärgerlich
waren Sie?

48. NPS

52. Nie ohne Anschlussfrage!

53. Weitere Kandidaten:

54. Mögliche Metriken
• TCR – Task Completion Rate
• TCT – Task Completion Time
• CR – Conversion Rate
• AOV – Average OrderValue
• Klassische Web-Analytics (Absprungrate, Seiten/
Besuch…)
• Technische Metriken (Ladezeit, Google Lighthouse,
WCAG-Score…)

55. Fazit

56. Nur derVergleich zählt.

57. Hört auf, nach dem
richtigen KPI zu suchen!

58. Unser wichtigstes
Werkzeug

59. Schlau sein heißt, seine Werkzeuge
den Gegebenheiten anzupassen.

60. Twitter: @benutzerfreund
Blog: www.benutzerfreun.de
Danke schön.