D'un côté, le monde de la réhabilitation et de la rééducation médicale est confronté à un problème de perte de motivation des patients et d'une faible observance du traitement à domicile. De l'autre, les jeux vidéo, grâce à leur ressort ludique et notamment au travers des serious games, se proposent de plus en plus comme un moyen de transmettre des connaissances ou compétences sérieuses, ou comme ce qui nous intéresse ici, d'outils d'aide à la rééducation. Cependant, concevoir des serious games adaptés soulèvent des questions, présentées ici.

1. Reeducation et JV NUI Co-conception Exemple HP References
Conception de Jeux Video pour la Reeducation
MELIA Georey
NaturalPad - Universite de Technologie de Troyes
15 septembre 2014
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 1/ 24

2. Reeducation et JV NUI Co-conception Exemple HP References
1 Reeducation et Jeux video
2 Les interfaces naturelles ou d'acquisition du mouvement (NUI)
3 La conception de jeux serieux sante : une approche collaborative
4 L'exemple de Hammer and Planks
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 2/ 24

3. Reeducation et JV NUI Co-conception Exemple HP References
1 Reeducation et Jeux video
2 Les interfaces naturelles ou d'acquisition du mouvement (NUI)
3 La conception de jeux serieux sante : une approche collaborative
4 L'exemple de Hammer and Planks
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 3/ 24

4. Reeducation et JV NUI Co-conception Exemple HP References
Reeducation fonctionnelle
Principe : repetition de mouvements
Plus l'exercice est repete plus la reeducation est ecace. Micera
et al, 2003
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 4/ 24

5. Reeducation et JV NUI Co-conception Exemple HP References
Reeducation fonctionnelle
Principe : repetition de mouvements
Plus l'exercice est repete plus la reeducation est ecace. Micera
et al, 2003
La motivation : un facteur essentiel
Plus la motivation est grande, plus on conserve une participation
active et on augmente l'observance. Flores et al. (2008)
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 4/ 24

6. Reeducation et JV NUI Co-conception Exemple HP References
Reeducation fonctionnelle
Principe : repetition de mouvements
Plus l'exercice est repete plus la reeducation est ecace. Micera
et al, 2003
Auto-reeducation a domicile : de nombreux abandons
Ex : seulement 31 % d'adhesion au traitement post-AVC aux USA
Shaughnessy et Macko (2006)
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 4/ 24

7. Reeducation et JV NUI Co-conception Exemple HP References
Reeducation et jeux video
Utilisation de jeux et jeux video dans le quotidien des praticiens.
Resultat recherche
Augmenter et maintenir la motivation des patients.
Le facteur de la motivation des JV est leur challenge. Burke et al, 09
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 5/ 24

8. Reeducation et JV NUI Co-conception Exemple HP References
Reeducation et jeux
Avantages
repetition
intensite
frequence
observance
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 6/ 24

9. Reeducation et JV NUI Co-conception Exemple HP References
Reeducation et jeux
Avantages
repetition
intensite
frequence
observance
Limites
pas d'expertise sante,
peu adaptes : diculte, mouvements a eectuer, intensite...
pas ou peu ajustables,
pas de suivi du patient ou decorrele des capacites.
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 6/ 24

10. Reeducation et JV NUI Co-conception Exemple HP References
Jeux video et reeducation
Hypothese de travail
L'aspect motivationnel rev^et une importance certaine dans
l'ecience, le volume et la frequence du travail de soin d'une
personne. Des SG adaptes pourraient donc avoir un reel bene

11. ce
en terme d'acceptation et de suivi de la therapie.
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 7/ 24

12. Reeducation et JV NUI Co-conception Exemple HP References
1 Reeducation et Jeux video
2 Les interfaces naturelles ou d'acquisition du mouvement (NUI)
3 La conception de jeux serieux sante : une approche collaborative
4 L'exemple de Hammer and Planks
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 8/ 24

13. Reeducation et JV NUI Co-conception Exemple HP References
Interface utilisateur naturelle (NUI)
De

14. nition
Interface permettant a un utilisateur de realiser des interactions
complexes et intuitives de maniere transparente.
NUI et jeux serieux
Objectifs : reconnaitre un maximum de mouvements naturels.
RD : ameliorer la reconnaissance des mouvements :
precision, temps reel,

15. abilite.
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 9/ 24

16. Reeducation et JV NUI Co-conception Exemple HP References
Interface utilisateur naturelle (NUI)
De

17. nition
Interface permettant a un utilisateur de realiser des interactions
complexes et intuitives de maniere transparente.
NUI et jeux serieux
Objectifs : reconnaitre un maximum de mouvements naturels.
RD : ameliorer la reconnaissance des mouvements :
precision, temps reel,

18. abilite.
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 9/ 24

19. Reeducation et JV NUI Co-conception Exemple HP References
Interface utilisateur naturelle
Quelques exemples...
Figure : Kinect de Microsoft
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 10/ 24

20. Reeducation et JV NUI Co-conception Exemple HP References
Interface utilisateur naturelle
Quelques exemples...
Figure : Nunchuk et Wiimote de Nintendo
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 10/ 24

21. Reeducation et JV NUI Co-conception Exemple HP References
Interface utilisateur naturelle
Quelques exemples...
Figure : Virtualizer de Cyberith
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 10/ 24

22. Tableau comparatif de dierentes UI
Les bras
Nom Novint XIO GipsyMidi QuhaZono Myo
Coûts 250€ £1105 environ 700€ $149
Parties Corps bras / marche bras / poignet corps entier
doigt / poignet
/ bras
Avantages
bras mécanique
(pas de latence) précis précis / sans fil
détecte le moindre
mouvement de doigts et
bras
Inconvénients
-temps d'installation
-contact avec la
personne
-temps d'installation
-contact physique
-orienter musique
-besoin d'espace /
-contact physique port d'un bracelet
Le corps
Nom MVN Awinda Vicon QuhaZono Kinect 1 Virtualizer
Coûts 10K 10K environ 700€ 216€ environ $600
Parties Corps corps entier corps entier corps entier corps entier pied / bassin
Avantages très précis ultra précis précis / sans fil
pas de contact avec
la personne
précis / pas besoin
chaussures / port de
casque RV
Inconvénients
destiné aux
professionnels
besoin d'une pièce
entière pour la
capture
- besoin d'espace /
- en contact avec
la personne besoin d'espace simulation marche
Nom Omni Kinect 2 PriorVR Perception Neuron
Coûts $499 $199 $289 à $429 $175 à $500
Parties Corps pied / bassin corps entier corps entier corps entier
Avantages
précis / port de
casque RV
stable, reco faciale,
pas de contact,
large foe, multiuser
mouvement 1 to 1 en
temps réel
on place les capteurs
où on veut
Inconvénients
contact avec
la personne / besoin
de chaussure
distance min 1,4 mètr
/ besoin d'espace
contact avec la
personne / besoin
d'espace contact avec le corps
Figure : Extrait de comparatif des NUIs, par zone captee. B.
Fidahoussen, NaturalPad 2014

23. Reeducation et JV NUI Co-conception Exemple HP References
1 Reeducation et Jeux video
2 Les interfaces naturelles ou d'acquisition du mouvement (NUI)
3 La conception de jeux serieux sante : une approche collaborative
4 L'exemple de Hammer and Planks
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 12/ 24

24. Reeducation et JV NUI Co-conception Exemple HP References
Creation d'un jeu video
La creation d'un jeu video
Createurs
Game designer, game developer, level designer, game producer,
concept artist, 3D modeler, audio artist, video editor, etc.
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 13/ 24

25. Reeducation et JV NUI Co-conception Exemple HP References
Et pour un jeu de reeducation?
La creation d'un serious game...
Acteurs supplementaires
Experts serieux : ingenieur pedagogique, professionnel de sante,
specialiste, sponsor, ingenieurs, artisans, etc.
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 14/ 24

26. Reeducation et JV NUI Co-conception Exemple HP References
Et pour un jeu de reeducation?
... pour la sante
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 15/ 24

27. Reeducation et JV NUI Co-conception Exemple HP References
Et pour un jeu de reeducation?
... pour la sante
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 15/ 24

28. Reeducation et JV NUI Co-conception Exemple HP References
Conception participative de jeux de reeducation
De la conception participative...
Un grand nombre de corps de metier et competences
! besoin de fusionner au mieux ces connaissances :
medicales, technologiques et ludographiques.
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 16/ 24

29. Reeducation et JV NUI Co-conception Exemple HP References
Conception participative de jeux de reeducation
De la conception participative...
Un grand nombre de corps de metier et competences
! besoin de fusionner au mieux ces connaissances :
medicales, technologiques et ludographiques.
... de maniere continue.
Rester au plus proche du besoin reel :
- Faire evaluer regulierement l'evolution par les dierents experts.
- Faire tester par les patients, principaux utilisateurs.
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 16/ 24

30. Reeducation et JV NUI Co-conception Exemple HP References
Conception participative de jeux de reeducation
Conception participative de jeux de reeducation
Positionnement : s'adresser a des professionnels du JV et du SG
Aider a ameliorer des points importants comme la vitesse de
production, la qualite des jeux ou la satisfaction des patients et
soignants.
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 17/ 24

31. Reeducation et JV NUI Co-conception Exemple HP References
Conception participative de jeux de reeducation
Conception participative de jeux de reeducation
Hypothese de travail
Prendre en consideration a la fois la composante ludique et
l'intention serieuse des le debut du processus de conception pour
les fusionner au mieux.
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 18/ 24

32. Reeducation et JV NUI Co-conception Exemple HP References
Conception participative de jeux de reeducation
Conception participative de jeux de reeducation
Le contr^ole, lien entre objectifs therapeutiques et ludographie.
Identi

33. er les mouvements de reeducation,
Identi

34. er les gameplays usant de ces mouvements ou
adaptables,
Repenser le jeu en identi

35. ant les verrous possibles.
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 19/ 24

36. Reeducation et JV NUI Co-conception Exemple HP References
Conception participative de jeux de reeducation
Figure : Classi

37. cation des objectifs therapeutiques generaux - Melia, 2013
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 20/ 24

38. Reeducation et JV NUI Co-conception Exemple HP References
Conception participative de jeux de reeducation
Figure : Classi

39. cation des objectifs therapeutiques moteurs - Melia, 2013
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 20/ 24

40. Reeducation et JV NUI Co-conception Exemple HP References
Conception participative de jeux de reeducation
Comment
S'inspirer de techniques comme l'impact mapping, les cartes
d'empathie ou les storyboards.
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 21/ 24

41. Reeducation et JV NUI Co-conception Exemple HP References
Conception participative de jeux de reeducation
Comment
S'inspirer de techniques comme l'impact mapping, les cartes
d'empathie ou les storyboards.
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 21/ 24

42. Reeducation et JV NUI Co-conception Exemple HP References
Conception participative de jeux de reeducation
Comment
S'inspirer de techniques comme l'impact mapping, les cartes
d'empathie ou les storyboards.
Figure : Extrait du storyboard d'utilisation de la plateforme de kinesitherapie
MediMoov de NaturalPad.
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 21/ 24

43. Reeducation et JV NUI Co-conception Exemple HP References
1 Reeducation et Jeux video
2 Les interfaces naturelles ou d'acquisition du mouvement (NUI)
3 La conception de jeux serieux sante : une approche collaborative
4 L'exemple de Hammer and Planks
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 22/ 24

44. Reeducation et JV NUI Co-conception Exemple HP References
Hammer and Planks
Explications et demonstration
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 23/ 24

45. Reeducation et JV NUI Co-conception Exemple HP References
References
Burke, McNeill, Charles, Morrow, Crosbie and McDonough. Serious games for
upper limb rehabilitation follo- wing stroke. In Games and Virtual Worlds for
Serious Applications, 2009. VS-GAMES'09. Conference in, pages 103-110.
IEEE, 2009
Flores, Eletha, et al. Improving patient motivation in game development for
motor de

46. cit rehabilitation. Proceedings of the 2008 International Conference
on Advances in Computer Entertainment Technology. ACM, 2008.
Micera, S., Carrozza, M. C., Guglielmelli, E., Cappiello, G., Zaccone, F., Freschi,
C., Colombo, R., Mazzone, a., Delconte, C., Pisano, F., Minuco, G., Dario, P.:
A Simple Robotic System for Neurorehabilitation. In: Autonomous Robots Vol.
19 (3), pp. 271{284 (2005)
MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 24/ 24