Cours Ergonomie des Interactions Personne-Machine 20 novembre 2013 Les différentes méthodologies dévaluation en IPM Mireille Bétrancourt - TECFA - FPSE

Cours Ergonomie des Interactions Personne-Machine 20 novembre 2013 Les diffrentes mthodologies dvaluation en IPM Mireille Btrancourt - TECFA - FPSE TECFA Technologies pour la Formation et lApprentissage

Plan de la sance Prsentation des groupes 28, 29, 30 Rappel et prcision sur lanalyse de lactivit Prsentation des diffrentes mthodes de test de lutilisabilit La mthode du test utilisateur : prsentation et exercice Conduite de lentretien : voir ppt complmentaire : http://tecfa.unige.ch/tecfa/teaching/LMRI41/1314/ergo8_entretien.pptx http://tecfa.unige.ch/tecfa/teaching/LMRI41/1314/ergo8_entretien.pptx

Mthodes danalyse de lactivit But : mieux connatre lactivit de lutilisatrice-teur - ses intentions, - les lments importants, -des exemples de tches sur lesquels btir vos scnarios (prcisment, ce que la personne voulait faire, pourquoi, avec qui, etc.) Mthode : Ralisez un entretien avec un utilisateur de votre site et dun public cible selon la mthode Story Telling avec relances Pourquoi-comment (Racontez-moi la dernire fois que.... Et les autres fois...) Dtails sur la mthode ici : http://tecfa.unige.ch/tecfa/teaching/LMRI41/projet_phase2.html Objectif ultime : construire un scnario comportant des tches authentiques pour le test utilisateurs

Comment valuer lergonomie dun systme ?

Mthodes pour valuer lergonomie Inspection experte Observation in situ questionnaire Test utilisateurs 5-10 participants Sans participant Donnes subjectives Donnes comportementales Grand nombre de participants Analyses quantitatives Analyses qualitatives Coteux en temps Peu coteux en temps Entretiens Focus groupes Entretiens Focus groupes Grilles normatives

Mthodes pour valuer lergonomie dun systme Inspection experte Observation in situ questionnaire Test utilisateurs Facilit dapprentissage Efficience Prvention des erreurs Satisfaction Utilisabilit Utilit Acceptabilit Valeurs dusage Intgration pratique Atteinte des objectifs utilisateurs Support lactivit Entretien Focus groupes Entretien Focus groupes

Approches par test utilisateurs Vrifier que le systme soit utilisable pour les utilisateurs (novices du systme ou de cette version) Evalue la prise en main (et pas lutilisation rgulire) Objectif : Caractristique : Doit tre faite par des vrais utilisateurs partir de scnarios dusage rels

Approche par test utilisateurs Verbalisation provoque simultane Auto-confrontation a posteriori Observation Approche clinique Test de reconnaissance Parcours oculomoteur Performances (temps dexcution, nombre de clics Approche exprimentale

Exemple de test utilisateur avec approche exprimentale Comparaison de deux interfaces de prescription Wipfli, R. (2012). Decision making in dynamic work situations: Building a framework for medical alerts in computerized drug prescription. Thse de lUniversit de Genve.

Version classique

Mthode : Version adapte

Parcours oculomoteur Films (cl_example.avi, ad_example.avi)

Le test utilisateur : construction et passation

1. Prparer l tude (phase 1 3 du projet) 2. Recruter les participants 3. Tester 3.1. Prsenter la situation 3.2. Conduire lentretien 4. Produire conclusions Les tapes suivre

Etapes de prparation du test Que propose le site ? Comment le site est-il construit ? (contenu, organisation fonctionnalits, outils daide) Comment le site est-il construit ? (contenu, organisation fonctionnalits, outils daide) Analyse du Contexte global 1 entretien Analyse de lactivit 1 entretien Analyse de lactivit Quest-ce que font les utilisateurs habituellement sur ce site ? Analyse du site Quelles tches donner pour le test utilisateurs ? Construction du scnario de test daprs analyse de lactivit et analyse du site Quels sont les problmes rencontrs par les utilisateurs ? Conduite du test Diagnostic Proposition de remdiations Conduite du test Diagnostic Proposition de remdiations

Construction du scnario (1/2) Voir sur page Description du projet -> conseils pour llaboration du scnario http://tecfa.unige.ch/tecfa/teaching/LMRI41/projet_phase2.html Le scnario pour le test : - Prvoit plusieurs tches formules de faon authentique (termes et buts de lutilisateurs interview dans lanalyse de lactivit) - Mets lutilisatrice-teur dans une situation simule, type jeu de rle - Donne des tches assez ouvertes, qui peuvent sexcuter de diffrentes faons - Mais qui demande une rponse prcise - Dont la rponse peut tre trouve sur le site !

Construction du scnario (2) Que pourrait-on reprocher aux tches proposes ci- dessous Sur un site de mobilier Trouve le canap de modle schlubuck, en combien de couleurs existe-t-il ? Sur un site de rservation de voyage Rserve une chambre dans un htel Cran-Montana du 1 er au 6 mars. Sur un site de transports publics Peut-on imprimer litinraire entre larrt Gare Cornavin et larrt Unimail ?

Reprsentatifs du public-cible (ou un seul des publics cible) Nutilisant pas le site Web que vous testez 5 personnes permettent didentifier un grand nombre de problmes Exprience dinternet : usagers rguliers 2. Recruter les participants

Mettre la personne sur la page daccueil du site Le but nest pas de vous valuer, mais dvaluer la qualit du site. Ce test va durer environ 20 minutes. Il ny a pas de bonne ou mauvaise rponse. Puis-je vous enregistrer... Voici la premire tche (imprimez-l et laissez-l lutil) PENSEZ TOUT HAUT PENSEZ TOUT HAUT hmm qu est-ce que vous tes en train de faire ? PENSEZ TOUT HAUT 3. Tester 3.1. Expliquer

Rgles classiques de l entretien : Ecouter > Parler Poser des questions sur son activit Poser des questions neutres Fournir un feedback neutre Respecter les silences, laisser un petit moment aprs chaque tche Rebondir sur les points intressants, ne pas suivre rigidement un canevas Traiter lutilisateur comme un expert dans son mtier, pas comme un cobaye (voir film test-utilisateur humour) Ne pas se laisser placer dans un rle dexpert par lutilisateur Arrter le test en cas dchec rptitif Prvoir un entretien post-test 3. Tester 3.2. Ecouter

Quavez-vous pens du site Web ? Faire passer un questionnaire comme la SUS (system Usability Scale). Jaimerais utiliser ce site frquemment Je trouve ce site inutilement complexe Je pense que ce site est facile utiliser Jaurais besoin dun support technique pour pouvoir utiliser ce site Les diffrentes fonctionnalits de ce site sont bien intgres Ce site est truff dincohrences Le grand public peut apprendre utiliser ce site trs rapidement Ce site est lourd utiliser Jai confiance en ce site Je dois apprendre beaucoup avant de pouvoir utiliser ce site efficacement Remercier le participant 3. Tester 3.3. Post-test

Les tapes du test utilisateur Voir lexemple du test de fruits (humoristique) http://www.youtube.com/watch?v=3Qg80qTfzgU Notez les diffrentes tapes de la passation

Maintenant vous de jouer Voir lexercice de test utilisateur : http://tecfa.unige.ch/tecfa/teaching/LMRI41/projet_phase4.html

Analyse de lactivit Test utilisateurs Analyse du systme Contenu, organisation, fonctionnalits, outils daide Pb dutilisabilit supposs Scnario dutilisation Contexte global dutilisation Un ou plusieurs exemples de tches authentiques Pb dutilisabilit observs : Diagnostic, propositions de remdiation 1 entretien 5 utilisateurs / -trices dun mme public cible Vous tes ici Attention, nous envoyer votre scnario pour avis !

Mthodes pour valuer lergonomie Inspection experte Observation in situ questionnaire Test utilisateurs 5-10 participants Sans participant Donnes subjectives Donnes comportementales Grand nombre de participants Analyses quantitatives Analyses qualitatives Coteux en temps Peu coteux en temps Entretiens Focus groupes Entretiens Focus groupes Grilles normatives

Documents

Cours Ergonomie des Interactions Personne-Machine 20 novembre 2013 Les différentes méthodologies dévaluation en IPM Mireille Bétrancourt - TECFA - FPSE