UX Days 2019 - Journée des Atelier du jeudi 20 juin 2019 - Atelier de Silvan Cabot, Amel Taïbi et Julie Plemeniti Arbanas : Tester à distance pour tester plus vite et plus souvent

1. “ÇA COÛTE MOINS CHER
QU’UNE RÉUNION”
Tester à distance pour tester plus vite et plus souvent

2. Product Manager
SeLoger
“Stratégie et vision produit, à la jonction de
la technique, du design et du business”
www.seloger.com

3. Place your screenshot here
Product & UX Director
Mezcalito (Grenoble)
“I help tems crafting products that do the job”
www.mezcalito.fr
3

4. Fondatrice
Userlynx
www.userlynx.com
4

5. LE PROBLÈME AVEC LA
RECHERCHE UTILISATEUR

6. @AlexOsterwalder

7. “Bien sûr que nous ferons de la
recherche et des tests…
Mais pas sur ce projet, sur le
prochain”

8. CYCLE EN VRUM

11. LEAN UX

12. “Bien sûr que nous ferons des tests
sur ce produit…
Mais pas sur ce sprint, sur le
prochain”

13. DIS AMEL DES TESTS
DISTANTS ÇA TE DIT?

14. “La « caricature de situation » représente des événements réels ou imaginaires sous une forme visiblement exagérée et met en relief
les mœurs ou le comportement de certains groupes humains.” (wikipedia)
Par exemple, faire dire à une seule personne tout ce qu’on a pu entendre sur un sujet de la part de dizaines d’autres...
Bye bye
Je connais déjà
mes utilisateurs !

15. “La « caricature de situation » représente des événements réels ou imaginaires sous une forme visiblement exagérée et met en relief
les mœurs ou le comportement de certains groupes humains.” (wikipedia)
Par exemple, faire dire à une seule personne tout ce qu’on a pu entendre sur un sujet de la part de dizaines d’autres...
On n’aura pas
le temps
On a les
résultats dans
1 semaine

16. “La « caricature de situation » représente des événements réels ou imaginaires sous une forme visiblement exagérée et met en relief
les mœurs ou le comportement de certains groupes humains.” (wikipedia)
Par exemple, faire dire à une seule personne tout ce qu’on a pu entendre sur un sujet de la part de dizaines d’autres...
J’ai pas le temps de
m’en occuper ça te prendra à
peine plus d’une
demi-journée

17. “La « caricature de situation » représente des événements réels ou imaginaires sous une forme visiblement exagérée et met en relief
les mœurs ou le comportement de certains groupes humains.” (wikipedia)
Par exemple, faire dire à une seule personne tout ce qu’on a pu entendre sur un sujet de la part de dizaines d’autres...
À distance on
voit pas les
gens Quand on fait
pas de test non
plus

18. “La « caricature de situation » représente des événements réels ou imaginaires sous une forme visiblement exagérée et met en relief
les mœurs ou le comportement de certains groupes humains.” (wikipedia)
Par exemple, faire dire à une seule personne tout ce qu’on a pu entendre sur un sujet de la part de dizaines d’autres...
A distance, y a
trop de biais
En présentiel non?

19. “La « caricature de situation » représente des événements réels ou imaginaires sous une forme visiblement exagérée et met en relief
les mœurs ou le comportement de certains groupes humains.” (wikipedia)
Par exemple, faire dire à une seule personne tout ce qu’on a pu entendre sur un sujet de la part de dizaines d’autres...
Il faut au moins 50
personnes pour que
ce soit significatif 5 suffisent
pour avancer
www.nngroup.com/articles/why-you-only-need-to-test-with-5-users/

20. “La « caricature de situation » représente des événements réels ou imaginaires sous une forme visiblement exagérée et met en relief
les mœurs ou le comportement de certains groupes humains.” (wikipedia)
Par exemple, faire dire à une seule personne tout ce qu’on a pu entendre sur un sujet de la part de dizaines d’autres...
Je préfère un
bon gros test à
la fin
Quand c’est trop
tard pour changer?

21. “La « caricature de situation » représente des événements réels ou imaginaires sous une forme visiblement exagérée et met en relief
les mœurs ou le comportement de certains groupes humains.” (wikipedia)
Par exemple, faire dire à une seule personne tout ce qu’on a pu entendre sur un sujet de la part de dizaines d’autres...
ça va coûter cher, je
préfère embaucher
un dev front

22. “Ça coûte moins cher qu’une réunion”

23. VERS UNE RECHERCHE
ACTIONNABLE ET
CONTINUE

24. ACTIONNABLE
Ne testez que ce que vous êtes prêts à changer
Ne testez que si vous pouvez changer
Ne testez que pour changer

25. ACTIONNABLE
L’analyse doit être faite par ceux qui actionnent:
PM & UX, mais aussi stakeholders, marketing,
développeurs...

26. ACTIONNABLE
Faites des rapports de recherches d’une seule
page si vous voulez qu’ils soient lus

27. CONTINUE
Testez beaucoup de sujets, souvent et sur de petits
échantillons

28. CONTINUE
Testez de la manière la moins chère et la plus rapide
possible

30. CONCRÈTEMENT À SELOGER
30

31. 25
FEATURE
TEAMS
15
marques
2
extranets

32. ORGANISATION
Nos bubble teams
FEATURE TEAMS RESSOURCES CROSS-FONCTIONNELLES
SUR PLUSIEURS FEATURE TEAMS
Coach Agile
UX Designer
UI Designer
Analytics
SEO
Quality

33. PROCESS TEST DISTANT @SELOGER
Rédaction du protocole
(2h PM-UX)
Test
(1 semaine)
Analyse & report
(½ journée PM-UX
+ équipe)
33

34. Il manque quelque
chose d’essentiel
dans ce modèle!

37. LET’S PLAY!
37

38. ◇ Réunissez vous par petit groupe de 2-3
◇ Présentez vous rapidement
◇ Vous êtes l’équipe produit du site
Référendum d’initiative partagée!

39. À quel moment?
EXPLORATION
Pour répondre à une question
précise, écarter des doutes,...
WIREFRAMES
Pour évaluer la pertinence des
parcours et des grands
principes
PROTOTYPES
FONCTIONNELS
Pour valider l’utilisabilité
PRE-PRODUCTION
Pour s’assurer de la cohérence
de l’ensemble
UX SANITY CHECK
Sur le site ou l’application en
production, parce que le
monde change
CHEZ VOS
CONCURRENTS
Pour établir un référentiel de
comparaison
39

40. ◇ Explorez rapidement le site
https://www.referendum.interieur.gouv.
fr/
◇ Faites un petit audit UX express sur le
parcours permettant d’apporter son
soutien à la proposition de loi
référendaire de l’exploitation des
aérodromes de Paris

41. Une segmentation et un contexte efficaces
PROJECTION
Recrutez des personnes qui ont
été dans le contexte
récemment ou qui prévoient
de l’être (mais pas qui le sont
aujourd’hui)
CONTEXTUALISATION
Décrivez comment ils sont
arrivés là, essayez de les faire
entrer en empathie
RESTEZ FACTUELS
Ne cherchez pas “des
bricoleurs” mais “des
personnes s’étant rendu au
moins une fois dans une
enseigne de bricolage cette
année”
41

42. ◇ Rédigez une introduction de
contextualisation
○ La plus courte possible
○ la plus simple possible

44. Rédigez des hypothèses actionnables
BOF
“Les utilisateurs cliquent sur le
bouton”
MIEUX
4/5 participants cliquent sur le
bouton
ENCORE MIEUX
4/5 participants cliquent sur le
bouton.
◇ Si oui je ferai A
◇ si non je fais B (ou
même C si 1/5)

45. ◇ Rédigez vos hypothèses (jusqu’à 5)

47. Le protocole
NE DEMANDEZ PAS AUX
PARTICIPANTS DE
CLIQUER SUR UN
BOUTON
Demandez leur d’atteindre leur
objectif
NE PARLEZ PAS DE CE
QUE VOUS VOULEZ
TESTER
Si vous voulez tester B, faites
les partir de A et demandez
leur d’aller à C
ÉVITEZ LE JARGON
Vraiment.
Soyez très vigilants sur ce
point, on oublie très vite
47
5 QUESTIONS +-2
Pas plus de 20mn

48. ◇ Draftez rapidement un protocole
permettant de valider/invalider vos
hypothèses

50. Connaissez les biais
SPONSOR
Ils sont payés et auront
tendance à être trop positifs.
Il y aura beaucoup de
dissonance entre ce que vous
verrez et ce que vous
entendrez.
APPROBATION
Lorsque vous analyserez, vous
accorderez TOUJOURS plus
d’importance à ce qui va dans
votre sens
CONFUSION
Vos participants peuvent se perdre, faire autre chose que ce qui est demandé.
1. Assurez vous qu’ils font réellement autre chose
2. Cherchez la source de l’erreur (produit? protocole? Ce n’est jamais l’utilisateur)
3. Analysez quand même, vous pouvez apprendre des choses
CONSEILS
Les participants vont vous
donner des conseils, n’oubliez
pas que c’est pas leur métier
mais le vôtre. (mais cherchez
quand même à savoir ce qu’il y
a derrière…)
50

51. “TSSS”Votre principale métrique est le nombre de “tsss”
par minute.
51

52. PERSONNE NE LIT LES
RAPPORTS DE RECHERCHES

53. julie@userlynx.com
amel.taibi@seloger.com
silvan@mezcalito.fr