20160104 apero web_evaluationux

AperoWeb 04/01/2016 - Bénédicte Schmitt

Apprenez à faire évaluer votre produit par des utilisateurs

Est-ce que votre produit sera adopté par les utilisateurs ? Est-ce que les utilisateurs seront ravis d’utiliser votre produit ?


Est-ce que les utilisateurs apprécieront mon produit ?

Est-ce que les utilisateurs sauront utiliser mon produit ?

Est-ce que les utilisateurs vivront une expérience incroyable avec mon produit ?

2


L’évaluation en UX

3


Rappelons-nous ce qu’est l’UX !

UX = User eXperience soit expérience utilisateur

Définition selon la norme ISO 9241-210 : l’UX correspond “aux réponses et aux perceptions d’une personne qui résultent de l’usage ou de l’anticipation de l’usage d’un produit, d’un service ou d’un système”

4


Quelle est la place de l’évaluation dans le process UX ?

5


Les enjeux d’une évaluation

Les 3U : utile, utilisable et utilisé

Savoir si :● les fonctionnalités répondent

bien aux besoins exprimés ● les informations présentées

correspondent aux attentes et sont compréhensibles

Savoir si :● Efficacité : les utilisateurs

peuvent précisément réaliser leurs tâches

● Efficience : les utilisateurs peuvent rapidement accéder aux informations

● Satisfaction : les utilisateurs sont contents

Découvrir si :● les utilisateurs apprennent

sans difficulté comment utiliser le produit

● les utilisateurs utilisent fréquemment le produit

● les utilisateurs sont contents d’utiliser le produit

6


Pourquoi réaliser une évaluation ?

➔ Valider un concept et/ou une solution➔ Recueillir les impressions des utilisateurs ➔ Déterminer des améliorations à apporter➔ Collecter des mesures ➔ Comparer différents produits ou différentes versions d’un

produit

⇒ Rencontrer les utilisateurs !

7


Les 4 points clé d’une évaluation

1. Les objectifs de l’évaluation et la définition des résultats à recueillir

2. La disponibilité des utilisateurs et le choix des méthodes d’évaluation

3. La préparation de l’évaluation4. L’analyse des résultats de l’évaluation

8


Les objectifs de l’évaluation et les résultats à recueillir

9

● Définir les objectifs de l’évaluation → savoir pourquoi l’évaluation doit être menée et fixer ses attentes○ Comparer une nouvelle version avec la version existante,

○ savoir si les différentes fonctionnalités sont comprises par les utilisateurs,

○ etc...

● Établir la liste de résultats à recueillir en fonction des objectifs de l’évaluation :○ Mesures quantitatives (temps mis pour réaliser la tâche, nombre d’

erreurs,...)

○ Mesures qualitatives (satisfaction de l’utilisateur, émotions ressenties,...)


La disponibilité des utilisateurs et le choix des méthodes d’évaluation

● Si les utilisateurs sont disponibles :○ Questionnaires standardisés (AttrakDiff, UEQ, SUS,...) - mesures

qualitatives

○ Entretiens (libres, semi-directifs et directifs) - mesures qualitatives○ Focus group - mesures qualitatives○ Observations - mesures qualitatives et/ou quantitatives○ Tests utilisateurs - mesures qualitatives et/ou quantitatives

→ Méthodes conseillées :

○ En conception avancée ou sur un prototype○ Sur un produit existant

10


La disponibilité des utilisateurs et le choix des méthodes d’évaluation

● Si les utilisateurs sont indisponibles :○ Evaluation par un expert d’après des heuristiques ou des

recommandations - mesures qualitatives

○ Inspection cognitive réalisée par un expert ou un groupe d’experts - mesures qualitatives

→ Méthodes conseillées :

○ En début de conception avant de rencontrer les utilisateurs ○ Sur un produit existant

11


La préparation de l’évaluation

● Définir le plan de l’évaluation (questions, protocole d’expérimentation, grille d’audit,...)

● Si une méthode avec utilisateurs est sélectionnée :○ trouver les participants, un lieu et une (ou plusieurs) date(s),

○ s’assurer que les participants ont bien compris les objectifs de l’évaluation,

● Si une méthode sans utilisateur est sélectionnée :○ Faire valider les objectifs de l’évaluation par le client

12


L’analyse des résultats de l’évaluation

● Confronter les problèmes rencontrés et les besoins des utilisateurs

● Si possible, réaliser des statistiques sur les mesures○ certaines mesures sont-elles statistiquement significatives ?

● Si des hypothèses ont été formulées : Valider (ou invalider) les hypothèses

● A l’issue de l’analyse : ○ Faire des propositions d’amélioration ○ Formuler de nouvelles problématiques à analyser

13


Le test utilisateur : ce n’est pas magique !

14


Qu’est-ce qu’un test utilisateur ?

Un test utilisateur :

● est l’évaluation d’un produit par des utilisateurs d’après un scénario ou des tâches définis

● qui permet de tester la validité des hypothèses formulées

… Mais pas de détecter des bugs

15


Les différents types de tests utilisateur

● Tests utilisateur à distance ● Tests utilisateur de type guerilla● Tests utilisateur in vitro vs in vivo

○ in vitro : en laboratoire → permet de maîtriser le contexte

○ in vivo : en situation → permet de réaliser les tests en conditions réelles

16


La construction du protocole d’expérimentation

1. Formuler les hypothèses de l’expérimentation2. Déterminer qui seront les participants3. Définir l’apparatus (matériel, configurations

requises,...)4. Déterminer la procédure de l’expérimentation (consigne et

tâches)5. Concevoir l’évaluation (variables indépendantes)6. Définir les mesures quantitatives et qualitatives

(variables dépendantes)

17


Exemple d’une procédure pour un test utilisateur

1. Questionnaire démographique → Valider l’adéquation du participant avec le persona ou profil

2. Questionnaire pré-test

→ Connaître les attentes et l’état d’esprit du participant avant le test

3. Réalisation des tâches du test4. Questionnaire post-test

→ Recueillir les impressions du participant après le test18


Quelques conseils sur la passation des tests utilisateur

● Enregistrez la trace des tâches réalisées par l’utilisateur et filmez-le si possible

● Observez l’utilisateur lorsqu’il réalise la tâche et notez ses réactions, ses paroles,...

● N'enchaînez pas les tests, faites une pause, respirez● Gardez en mémoire que ce n’est pas vous ou le concepteur

que l’utilisateur évalue (tout comme vous n’évaluez pas l’utilisateur mais le produit)

● Variez si possible les conditions ● Adaptez-vous !

19


Quelques conseils plus généraux

● Faites des pré-tests avec 1 ou 2 utilisateurs “bêta”● Si vous n’avez pas beaucoup de temps, le minimum est d’

être clair(e) sur les objectifs et la procédure● Combinez plusieurs méthodes : tests + questionnaires,

tests + entretiens,...● Combinez mesures quantitatives et qualitatives● Essayer d’avoir un minimum de 5 utilisateurs

20


En conclusion

21


Que faut-il retenir ?

Pour réussir une évaluation :

● Déterminez avant tout les objectifs et les résultats attendus

● Sélectionnez la méthode d’évaluation adéquate● Et surtout prenez du plaisir à rencontrer les

utilisateurs !

22

Design

20160104 apero web_evaluationux