1. Reeducation et JV NUI Co-conception Exemple H&P References Conception de Jeux Video pour la Reeducation MELIA Georey NaturalPad - Universite de Technologie de Troyes 15 septembre 2014 MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 1/ 24

2. Reeducation et JV NUI Co-conception Exemple H&P References 1 Reeducation et Jeux video 2 Les interfaces naturelles ou d'acquisition du mouvement (NUI) 3 La conception de jeux serieux sante : une approche collaborative 4 L'exemple de Hammer and Planks MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 2/ 24

3. Reeducation et JV NUI Co-conception Exemple H&P References 1 Reeducation et Jeux video 2 Les interfaces naturelles ou d'acquisition du mouvement (NUI) 3 La conception de jeux serieux sante : une approche collaborative 4 L'exemple de Hammer and Planks MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 3/ 24

4. Reeducation et JV NUI Co-conception Exemple H&P References Reeducation fonctionnelle Principe : repetition de mouvements Plus l'exercice est repete plus la reeducation est ecace. Micera et al, 2003 MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 4/ 24

5. Reeducation et JV NUI Co-conception Exemple H&P References Reeducation fonctionnelle Principe : repetition de mouvements Plus l'exercice est repete plus la reeducation est ecace. Micera et al, 2003 La motivation : un facteur essentiel Plus la motivation est grande, plus on conserve une participation active et on augmente l'observance. Flores et al. (2008) MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 4/ 24

6. Reeducation et JV NUI Co-conception Exemple H&P References Reeducation fonctionnelle Principe : repetition de mouvements Plus l'exercice est repete plus la reeducation est ecace. Micera et al, 2003 Auto-reeducation a domicile : de nombreux abandons Ex : seulement 31 % d'adhesion au traitement post-AVC aux USA Shaughnessy et Macko (2006) MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 4/ 24

7. Reeducation et JV NUI Co-conception Exemple H&P References Reeducation et jeux video Utilisation de jeux et jeux video dans le quotidien des praticiens. Resultat recherche Augmenter et maintenir la motivation des patients. Le facteur de la motivation des JV est leur challenge. Burke et al, 09 MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 5/ 24

8. Reeducation et JV NUI Co-conception Exemple H&P References Reeducation et jeux Avantages repetition intensite frequence observance MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 6/ 24

9. Reeducation et JV NUI Co-conception Exemple H&P References Reeducation et jeux Avantages repetition intensite frequence observance Limites pas d'expertise sante, peu adaptes : diculte, mouvements a eectuer, intensite... pas ou peu ajustables, pas de suivi du patient ou decorrele des capacites. MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 6/ 24

10. Reeducation et JV NUI Co-conception Exemple H&P References Jeux video et reeducation Hypothese de travail L'aspect motivationnel rev^et une importance certaine dans l'ecience, le volume et la frequence du travail de soin d'une personne. Des SG adaptes pourraient donc avoir un reel bene

11. ce en terme d'acceptation et de suivi de la therapie. MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 7/ 24

12. Reeducation et JV NUI Co-conception Exemple H&P References 1 Reeducation et Jeux video 2 Les interfaces naturelles ou d'acquisition du mouvement (NUI) 3 La conception de jeux serieux sante : une approche collaborative 4 L'exemple de Hammer and Planks MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 8/ 24

13. Reeducation et JV NUI Co-conception Exemple H&P References Interface utilisateur naturelle (NUI) De

14. nition Interface permettant a un utilisateur de realiser des interactions complexes et intuitives de maniere transparente. NUI et jeux serieux Objectifs : reconnaitre un maximum de mouvements naturels. R&D : ameliorer la reconnaissance des mouvements : precision, temps reel,

15. abilite. MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 9/ 24

16. Reeducation et JV NUI Co-conception Exemple H&P References Interface utilisateur naturelle (NUI) De

17. nition Interface permettant a un utilisateur de realiser des interactions complexes et intuitives de maniere transparente. NUI et jeux serieux Objectifs : reconnaitre un maximum de mouvements naturels. R&D : ameliorer la reconnaissance des mouvements : precision, temps reel,

18. abilite. MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 9/ 24

19. Reeducation et JV NUI Co-conception Exemple H&P References Interface utilisateur naturelle Quelques exemples... Figure : Kinect de Microsoft MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 10/ 24

20. Reeducation et JV NUI Co-conception Exemple H&P References Interface utilisateur naturelle Quelques exemples... Figure : Nunchuk et Wiimote de Nintendo MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 10/ 24

21. Reeducation et JV NUI Co-conception Exemple H&P References Interface utilisateur naturelle Quelques exemples... Figure : Virtualizer de Cyberith MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 10/ 24

22. Tableau comparatif de dierentes UI Les bras Nom Novint XIO GipsyMidi QuhaZono Myo Cots 250 1105 environ 700 $149 Parties Corps bras / marche bras / poignet corps entier doigt / poignet / bras Avantages bras mcanique (pas de latence) prcis prcis / sans fil dtecte le moindre mouvement de doigts et bras Inconvnients -temps d'installation -contact avec la personne -temps d'installation -contact physique -orienter musique -besoin d'espace / -contact physique port d'un bracelet Le corps Nom MVN Awinda Vicon QuhaZono Kinect 1 Virtualizer Cots >10K >10K environ 700 216 environ $600 Parties Corps corps entier corps entier corps entier corps entier pied / bassin Avantages trs prcis ultra prcis prcis / sans fil pas de contact avec la personne prcis / pas besoin chaussures / port de casque RV Inconvnients destin aux professionnels besoin d'une pice entire pour la capture - besoin d'espace / - en contact avec la personne besoin d'espace simulation marche Nom Omni Kinect 2 PriorVR Perception Neuron Cots $499 $199 $289 $429 $175 $500 Parties Corps pied / bassin corps entier corps entier corps entier Avantages prcis / port de casque RV stable, reco faciale, pas de contact, large foe, multiuser mouvement 1 to 1 en temps rel on place les capteurs o on veut Inconvnients contact avec la personne / besoin de chaussure distance min 1,4 mtr / besoin d'espace contact avec la personne / besoin d'espace contact avec le corps Figure : Extrait de comparatif des NUIs, par zone captee. B. Fidahoussen, NaturalPad 2014

23. Reeducation et JV NUI Co-conception Exemple H&P References 1 Reeducation et Jeux video 2 Les interfaces naturelles ou d'acquisition du mouvement (NUI) 3 La conception de jeux serieux sante : une approche collaborative 4 L'exemple de Hammer and Planks MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 12/ 24

24. Reeducation et JV NUI Co-conception Exemple H&P References Creation d'un jeu video La creation d'un jeu video Createurs Game designer, game developer, level designer, game producer, concept artist, 3D modeler, audio artist, video editor, etc. MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 13/ 24

25. Reeducation et JV NUI Co-conception Exemple H&P References Et pour un jeu de reeducation? La creation d'un serious game... Acteurs supplementaires "Experts serieux" : ingenieur pedagogique, professionnel de sante, specialiste, sponsor, ingenieurs, artisans, etc. MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 14/ 24

26. Reeducation et JV NUI Co-conception Exemple H&P References Et pour un jeu de reeducation? ... pour la sante MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 15/ 24

27. Reeducation et JV NUI Co-conception Exemple H&P References Et pour un jeu de reeducation? ... pour la sante MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 15/ 24

28. Reeducation et JV NUI Co-conception Exemple H&P References Conception participative de jeux de reeducation De la conception participative... Un grand nombre de corps de metier et competences ! besoin de fusionner au mieux ces connaissances : medicales, technologiques et ludographiques. MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 16/ 24

29. Reeducation et JV NUI Co-conception Exemple H&P References Conception participative de jeux de reeducation De la conception participative... Un grand nombre de corps de metier et competences ! besoin de fusionner au mieux ces connaissances : medicales, technologiques et ludographiques. ... de maniere continue. Rester au plus proche du besoin reel : - Faire evaluer regulierement l'evolution par les dierents experts. - Faire tester par les patients, principaux utilisateurs. MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 16/ 24

30. Reeducation et JV NUI Co-conception Exemple H&P References Conception participative de jeux de reeducation Conception participative de jeux de reeducation Positionnement : s'adresser a des professionnels du JV et du SG Aider a ameliorer des points importants comme la vitesse de production, la qualite des jeux ou la satisfaction des patients et soignants. MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 17/ 24

31. Reeducation et JV NUI Co-conception Exemple H&P References Conception participative de jeux de reeducation Conception participative de jeux de reeducation Hypothese de travail Prendre en consideration a la fois la composante ludique et l'intention serieuse des le debut du processus de conception pour les fusionner au mieux. MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 18/ 24

32. Reeducation et JV NUI Co-conception Exemple H&P References Conception participative de jeux de reeducation Conception participative de jeux de reeducation Le contr^ole, lien entre objectifs therapeutiques et ludographie. Identi

33. er les mouvements de reeducation, Identi

34. er les gameplays usant de ces mouvements ou adaptables, Repenser le jeu en identi

35. ant les verrous possibles. MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 19/ 24

36. Reeducation et JV NUI Co-conception Exemple H&P References Conception participative de jeux de reeducation Figure : Classi

37. cation des objectifs therapeutiques generaux - Melia, 2013 MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 20/ 24

38. Reeducation et JV NUI Co-conception Exemple H&P References Conception participative de jeux de reeducation Figure : Classi

39. cation des objectifs therapeutiques moteurs - Melia, 2013 MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 20/ 24

40. Reeducation et JV NUI Co-conception Exemple H&P References Conception participative de jeux de reeducation Comment S'inspirer de techniques comme l'impact mapping, les cartes d'empathie ou les storyboards. MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 21/ 24

41. Reeducation et JV NUI Co-conception Exemple H&P References Conception participative de jeux de reeducation Comment S'inspirer de techniques comme l'impact mapping, les cartes d'empathie ou les storyboards. MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 21/ 24

42. Reeducation et JV NUI Co-conception Exemple H&P References Conception participative de jeux de reeducation Comment S'inspirer de techniques comme l'impact mapping, les cartes d'empathie ou les storyboards. Figure : Extrait du storyboard d'utilisation de la plateforme de kinesitherapie MediMoov de NaturalPad. MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 21/ 24

43. Reeducation et JV NUI Co-conception Exemple H&P References 1 Reeducation et Jeux video 2 Les interfaces naturelles ou d'acquisition du mouvement (NUI) 3 La conception de jeux serieux sante : une approche collaborative 4 L'exemple de Hammer and Planks MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 22/ 24

44. Reeducation et JV NUI Co-conception Exemple H&P References Hammer and Planks Explications et demonstration MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 23/ 24

45. Reeducation et JV NUI Co-conception Exemple H&P References References Burke, McNeill, Charles, Morrow, Crosbie and McDonough. Serious games for upper limb rehabilitation follo- wing stroke. In Games and Virtual Worlds for Serious Applications, 2009. VS-GAMES'09. Conference in, pages 103-110. IEEE, 2009 Flores, Eletha, et al. "Improving patient motivation in game development for motor de

46. cit rehabilitation." Proceedings of the 2008 International Conference on Advances in Computer Entertainment Technology. ACM, 2008. Micera, S., Carrozza, M. C., Guglielmelli, E., Cappiello, G., Zaccone, F., Freschi, C., Colombo, R., Mazzone, a., Delconte, C., Pisano, F., Minuco, G., Dario, P.: A Simple Robotic System for Neurorehabilitation. In: Autonomous Robots Vol. 19 (3), pp. 271{284 (2005) MELIA Georey Conception de JV pour la Reeducation 15 septembre 2014 24/ 24