Réflexivité et visualisation interactive de traces

Réflexivité et visualisation

interactive de traces :

quelques travaux en cours à Silex

Yannick PriéLIRIS UMR 5205 Université Lyon 1

Journée « Traces et EIAH »Organisée dans le cadre du GDR I35 mai 2010, Lyon

Grue, Takashi Shuji

Plan

• Réflexivité et technologie pour la réflexivité• Notre approche générale• Visualisation interactive de traces pour la

réflexivité• Exemples• Conclusion

Réflexivité ?

• Partie importante de l’activité cognitive• Faculté d’entrer en relation avec soi-même, son

activité, ses processus• Dimension explicite / consciente• Permet

– régulation de l’action et de l’activité (temps court)• eg. dialogue avec une situation (Schön)

– développement (temps long)• eg. apprentissage - abstraction réfléchissante (Piaget, Vigotsky)• eg. amélioration de pratique professionnelle (Clot)

Réflexivité et inscriptions

• Les processus réflexifs s’appuient sur des inscriptions au sens large – inscriptions mnésiques– objets, artefacts– marques laissées dans l’environnement

• Dimension d’interprétation, de création de signification orientée vers soi-même, son activité, ses processus– toute inscription en tant qu’elle peut-être support de

signification liée à l’expérience personnelle soutient potentiellement la réflexivité

Technologies pour la réflexivité

• Artefacts explicitement conçus pour soutenir la réflexivité– capturent des éléments liés à l’expérience du sujet

• fonctions corporelles (rythme cardiaque, tension…)• contexte (champ de vision, environnement sonore) • activité (marques de l’activité : inscriptions, traces)

– permettent la construction de signification dans des situations variées• individuel / collectif (famille, collègues, thérapeute, communauté)• contemplation, dialogue, utilisation dans l’activité, etc.

– pour des objectifs variés• amélioration pratique professionnelle• apprentissage• utilisation d’outils• …

Equipe Silex – liris.cnrs.fr/silex

• Supporting Interaction and Learning by Experience • Approche

– couple (homme,système) comme co-apprenant – la réflexivité comme un des moyens de soutenir ce co-

apprentissage• le système permet de construire réflexivement une signification à

propos de l’activité qui conduit à une régulation / modification de celle-ci

• l’action même de construction réflexive a pour effet de modifier le système et de l’adapter à la pratique, y compris réflexive

Expérience d’utilisation d’un système informatique

• Expérience – personnelle, vécue, singulière– de l’utilisation d’un système

• le système et l’espace numérique associé sont le lieu de l’expérience

• Les inscriptions liées à l’utilisation participent à l’expérience– les inscriptions ne sont pas l’expérience

Réflexivité liée à l’expérience d’utilisation

• Fournir a minima le réfléchissement de l’activité, des actions, du contexte– systèmes réfléchissants

• Permettre au delà la constitution explicite et la remobilisation de l’expérience en tant qu’expérience par le sujet– systèmes réflexifs

Systèmes réfléchissants (1)

• Systèmes à feedback simple– undo, awareness d’activité collective– le réfléchissement de l’activité est directement

incorporé dans celle-ci

Systèmes réfléchissants (2)

• Systèmes à historiques d’interaction– mémoires contextuelles (timelines, historiques de

navigation, footprints), outils de coordination autour de ressources, ré-exécution et macros

– il peut y avoir constitution d’une expérience d’utilisation explicite, quelques moyens offerts en vue de sa remobilisation

Systèmes réfléchissants (3)

• Systèmes explicitement conçus pour soutenir la réflexivité– systèmes « miroir » visant à inciter l’élève à

adopter une posture réflexive : se situer par rapport à une référence, à un groupe, devenir conscient de son activité

• utilisation d’indicateurs (CSCL principalement)

– souvent trop grande prescription du sens à donner à l’activité, ce qui nuit à l’activité réflexive

Pour des systèmes réflexifs

• Réfléchissants• Génériques

– non liés à une activité particulière• Permettant la constitution explicite et la

mobilisation de l’expérience d’utilisation – notamment la constitution de narrations

Principes

• Considérer les inscriptions numériques de l’activité comme centrales – Cf. Théorie de l’Activité : les inscriptions et les outils

comme lieux de l’articulation spatio-socio-temporelle de l’activité

• Donner accès – dans l’environnement – pendant l’activité – à des inscriptions interprétables comme représentations

de l’activité et mobilisables en tant que telles

Quelles propriétés des inscriptions pour la réflexivité ?

• Visibilité – disponibilité des inscriptions sous une forme lisible et explicite dès le

moment de l’activité

• Interprétabilité– quantité « juste » d’information– possibilité de voir le général dans le particulier de l’inscription– possibilité de comprendre le singulier dans le cadre du général– possibilité d’attribuer ce qui est à soi et aux autres

• Appropriabilité– possibilité de mobiliser les inscriptions dans le cadre de l’activité :

manipulation et partage

Traces pour les systèmes réflexifs

• Inscriptions considérées ici – traces explicites de l’activité– traces modélisées

• Systèmes de gestion des traces – inscriptions – collecte des traces– conservation des traces

• base de traces

– transformation de traces • assurer l’interprétabilité

– outils d’exploitation des traces – visualisation interactive • assurer la visibilité et l’appropriabilité

Traces et transformations

• Traces modélisées– observés– modèle de traces

• Transformation de traces– sélection– réécriture– fusion

• Graphe des transformations– traçabilité

Systèmes à base de traces

Systèmes à Base de Traces : cadre réflexif

Visualisation interactive de traces pour la réflexivité

• Fonctionnalités génériques1. visualisation de la trace dès sa collecte2. visualisation des obsels, du temps, de la modélisation de

la trace3. contextualisation de la trace par rapport aux objets de

l’activité4. construction de points de vues multiples sur la trace

• y compris transformation

5. partage de traces et documentarisation

• Dépendance au domaine applicatif

1- Visualisation de la trace pendant la collecte

• Objectif : « naturalisation » de la trace• Awareness de traçage• Débrayabilité

2- Présentation de trace

• Présentation des obsels – types – attributs et valeurs

• Présentation du temps / séquence– timeline, roue, liste, etc.– obsels événementiels et duratifs

• Présentation du modèle– relations au niveau abstrait (eg. hiérarchie)

3- Traces et objets de l’activité

• Beaucoup de modèles mettent en jeu – utilisateurs– actions– objets de l’activité

• Les objets de l’activités sont les inscriptions principales

• Contextualisations possibles– les objets dans la trace– la trace dans les objets

4-Gestion des abstractions

• Points de vue multiples– filtrages par utilisateurs, actions, objets, etc.– filtres textuels– paramétrages et profils

• Gestion des transformations– ma base de traces

5- Partage et documentarisation

• Partage– simultané / temps réel : traces ouvertes– post-activité : traces fermées

• Documentarisation– création de documents à partir de traces

Quelques travaux à Silex

• Tentatives variées de visualisations interactives de traces– Timeline EDF– Traces dans Advene– Visu – projet Ithaca– Travaux moins aboutis

Timeline conception collaborative

• Thèse Julien Laflaquière• Tâche de reprise d’activité à partir de traces (après 2 mois)• Résultat : trace interprétable, manque de « points

d’accroche »

Advene - traces

• Thèse Bertrand Richard• Projet Advene (advene.org)• Traces pour la reprise d’activité après perte d’attention /

interruption

Advene - traces

Advene - traces

Advene - traces

• Thèse Bertrand Richard• Projet Advene (advene.org)• Traces pour la reprise d’activité après perte d’attention /

interruption• Expérimentations

– annotation, interruption, reprise

• Conclusions préliminaires– Courtes interruptions : l’outil en lui-même est suffisant– Manque de point d’entrée permanent dans le trace– Reprise effective d’activité par retour sur éléments / moments du film

Visu – ITHACA

• Projet ANR ITHACA (Lyon 1, Lyon 2, TECFA)• Visu : application de tutorat synchrone

– salon synchrone / salon de rétrospection

Visu – salon synchrone

Visu – salon de rétrospection

Visu – ITHACA

• Projet ANR ITHACA (Lyon 1, Lyon 2, TECFA)• Visu : application de tutorat synchrone

– salon synchrone / salon de rétrospection

• Expérimentation janvier à mars 2010, enseignement de FLE Lyon 2 / Berkeley

• Quelques résultats préliminaires – Trace synchrone / marqueurs : difficulté d’utilisation (tuteurs)

• manque de pratique « multitâche »• difficulté de la construction de pratique

– Salon asynchrone : potentiel perçu par tuteurs et étudiants, appropriabilité progressive appréciée

• bonne compréhension de l’interaction pédagogique (> verbale)

Interprétation de traces

• Visualisation interactive de trace orientée transformations• Thèse Damien Cram• Objectif

– fouille de données semi-automatique permettant de trouver des épisodes significatifs (chroniques) et donc des motifs pertinents de transformation par réécriture

Interprétation de traces

Exemples : documentarisation • Thèse Leila Yahiaoui

• Redocumentation de l’activité

T2 : Redocumentation interactive

Outil éditorial externe

DEDS

copie

MT

Modèle Trace TMOb1 Ob2 ……

ÉlémentsApplication

(a)

stabilisation

DRT

Outil de redocumentation

T1 : Redocumentation interactive assistée

DJ

Fj1

Fj3

Fj2

Fj4

…..

Rj1

Rj2

Rj3

Rj4

D0

F1

F3

F2

F4

…..

R1

R2

R3

T0 : Redocumentation automatique paramétrée

Exemples : documentarisation

Conclusion (1)

• Vers des systèmes réflexifs comme systèmes réfléchissant permettant la construction de l’expérience par une appropriation / remobilisation des inscriptions

• Les inscriptions pour la réflexivité sous forme de traces modélisées

• Différentes applications à base de traces orientées visualisation interactive

Conclusion (2)

• Expérimentations en cours / à suivre– Advene-traces

• expérimentation en juin

– Visu• fin étude résultats expérimentation 2010• étude ergonomique (mai-juin 2010)• Visu 2.0 sur trois campus (2010-2011)

– Projet FUI Cine Cast• Bibliothèque numérique audiovisuelle

– Knowings – Procogec 2 (?)

Remerciements

• Equipe Silex – particulièrement Julien Laflaquière et Magali

Ollagnier-Beldame• Projet ITHACA