Intégration de l’oculométrie dans les méthodes d’évaluation d’Interfaces Homme Machine...

Intégration de l’oculométrie dans les méthodes d’évaluation d’Interfaces

Homme Machine

Soutenance finale

12 mars 2004

Présenté par :

Alban HERMETChristelle DAVEZACMélanie JEANJEANYannick GROSSET

Responsable : Lucas STEPHANEeurisco

European Institute of Cognitive Science and Engineering

2

Plan

• Contexte et sujet• Gestion de projet• Modélisation cognitive• Expérimentation• Analyse des données• Bilan

Contexte et sujetGestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

4

• Le client

European Institute of Science Cognitive and Engineering

• Le sujet

Quels sont les apports de l’oculométrie dans l’évaluation d’une Interface Homme Machine ?

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

5

Objectifs du projet

Étude des méthodes utilisant

l’oculométrie

Étude du concept d’interfaces

procédurales

Expérimentation de TEAM

Analyse des données

Conclusions sur les interfaces procédurales

Conclusions sur l’utilisation de l’oculométrie

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

Gestion de projetContexte et sujet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

7

Démarche de projet

Modélisationcognitive

Expérimentation

Analyse des données

Modèles mentaux

Agents

Fonctions cognitives

Données (vidéos + grilles)

Questionnaire

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

8

Conduite de projet

– Organisation• Répartition des tâches• Réunions

– Qualité• Gestion des versions de documents• Compte rendus de réunions

– Gestion des contraintes

Février 2004

Octobre 2003

Novembre 2003

Décembre 2003

Janvier 2004

Mars 2004

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

Conception du protocole

Documentation

Modélisation cognitive

Expérimentation

Analyse des données

Modélisation cognitive

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

10

Modélisationcognitive

Expérimentation

Analyse des données

Modèles mentaux

Agents

Fonctions cognitives

Données (vidéo + grilles)

Questionnaire

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

11

Fonction Cognitive

Agent Cognitif

Modèle Mental

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

Fonctions cognitives, Agents et Modèles Mentaux

Rôle

Contexte

Ressources

Tâche Activité

Agent Cognitif

Fonction Cognitive

Fonction Cognitive

Fonction Cognitive

12

Type de widget / interactions possibles

Agents cognitifs

Position relative / interactions possibles

Navigation dans une arborescence de fichier

Sélection d’un fichier

Modèles mentaux

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

Fonctions cognitives

Association icônes / zone d’affichage

Association masques / zone d’affichage

Expérimentation

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

14

Modélisationcognitive

Expérimentation

Analyse des données

Modèles mentaux

Agents

Fonctions cognitives

Données (vidéo + grilles d’évaluation)

Questionnaire

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

15

• Hypothèses de l’expérience (TEAM):

H1 : Le code couleur demande un apprentissage pour être assimilé

H2 : Le timer utilise des couleurs qui peuvent prêter à confusion

H3 : Le système de navigation n’est pas très intuitif

Méthode expérimentale

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

16

Le dispositif

Caméra scène

Head tracker

Vitre réfléchissante

Rayon infrarouge

Caméra oeil

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

17

Le dispositif

Station d’enregistrement Écran d’affichage (TFT)

Générateur champ magnétique

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

18

• Élaboration des questions– Conception itérative– Questions liées aux fonctions cognitives

• Briefing– Consignes lues– Présentation dynamique code couleur TEAM

• Expérimentation– 10 sujets (8 novices, 2 experts)– Pas de problème visuel

• Débriefing– Retour sur questions– Rating Scale SART

Protocole expérimental

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

19

Déroulement de l’expérimentation

Protocole expérimental

Q11.2

Y a-t-il plusieurs« Viewpoints / Concepts selected »?

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

Analyse des données

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

21

Modélisationcognitive

Expérimentation

Analyse des données

Modèles mentaux

Agents

Fonctions cognitives

Données (vidéo + grilles)

Questionnaire

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

22

• Analyse non exhaustive

• Test de la méthode sur des éléments d’interface identifiés comme problématiques

• Mise en évidence des problèmes liés à ces éléments

ObjectifsContexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

23

Données recueillies– Vidéos– Fichiers de données numériques– Grilles d’évaluation

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

24

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

Démarche dans l’analyse

02468

1012

Nombre d'erreurs sur 29questions

Taux d’erreur

Comportements Patterns

+

tous les éléments

éléments verts

éléments verts + timer

Éléments de l’interface regardés

« Quelles sont les zones sur lesquelles vous pouvez cliquer ? »

25

H3 : Le système de navigation n’est pas très intuitif

Signification des couleurs

Navigation entre éléments

Modèles mentaux

Couleur des widgets

Agents cognitifs

Position relative

État des widgets

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

?

Association label / flèches et zone

d’affichage des concepts

Fonctions cognitives

Zone verte / zone cliquable

Flèches pour naviguer

26

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

Conclusions pour H3 :

– Affordance des flèches fonctionne

– Champ d’action des flèches non perçu

– Nécessite un apprentissage approfondi (construction du modèle mental approprié)

– Recommandations pour la conception

Bilan

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

28

• Mise en évidence de différents comportements utilisateurs

Rétroactions :• Intervenir au niveau conception de l’interface• Apprentissage

• Base de réflexion sur des données objectives

• Base de discussion dans les phases de conception participative et d’évaluation

• Évaluer la complexité cognitive d’une interface

Oculométrie et Modélisation cognitiveContexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

29

• Intérêts personnels

– Technologie en plein essor– Méthode novatrice– Élaboration d’un protocole d’expérimentation– Difficultés de rédaction d’un questionnaire– Mise au point d’une modélisation cognitive exploitable

pour d’autres cas d’utilisation

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

30

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan

31

Questions ?

Contexte et sujet

Gestion de projet

Modélisation cognitive

Expérimentation

Analyse de données

Bilan