Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay...

Interagir avec un objet mixte

Propriétés physiques et numériques

Céline Coutrix, Laurence NigayÉquipe Ingénierie de l’Interaction Homme-Machine (IIHM)Laboratoire d’Informatique de Grenoble (LIG)

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

QuickTime™ et undécompresseur TIFF (non compressé)sont requis pour visionner cette image.

2

QuickTime™ and aPhoto - JPEG decompressor

are needed to see this picture.

Introduction : systèmes mixtes

• fusion des mondes physique et numérique• beaucoup d’applications

3

Introduction : Modèle d’Interaction

• Pouvoir descriptif

• Pouvoir génératif

• Pouvoir comparatif/taxinomique– Ensemble de caractéristiques

4

QuickTime™ et undécompresseur codec YUV420

sont requis pour visionner cette image.

QuickTime™ et undécompresseur codec YUV420

sont requis pour visionner cette image.

Introduction : systèmes mixtes

QuickTime™ et undécompresseur TIFF (LZW)sont requis pour visionner cette image.QuickTime™ et un

décompresseur TIFF (non compressé)sont requis pour visionner cette image.

5

Plan

• Introduction• Objet mixte

– Définition– Caractérisation intrinsèque

• Interagir avec un objet mixte– Définition– Caractérisation extrinsèque

• Conclusion

6

Objet mixte : définition

objet physique

propriétésphysiques

objet numérique

propriétésnumériques

objet mixte

propriétésphysiques

propriétésnumériques?

• Modalités d’Interaction m = (d, l)

• parole = (microphone, langage pseudo-naturel)

7

Objet mixte : définition

•Modalités de liaison

propriétés physiques

propriétésnumériques

dispositif d’entrée

dispositifde sortie

langagede sortie

langaged’entrée

8

Objet mixte : exemple

caméra vision parordinateur

[x, y]

projecteur carré jaune

tableaimantée

activation

9

Plan

• Introduction• Objet mixte

– Définition– Caractérisation intrinsèque

• Interagir avec un objet mixte– Définition– Caractérisation extrinsèque

• Conclusion

10

Caractérisation intrinsèque

propriétés physiques

propriétésnumériques

dispositif d’entrée

dispositifde sortie

langagede sortie

langaged’entrée

11

Objet mixte : propriétés physiques

non captéesgénérées

captéesnon générées

captéesgénérées

non captéesnon générées

12

Objet mixte : propriétés physiques

position

QuickTime™ and aPNG decompressor

are needed to see this picture.

QuickTime™ et undécompresseur TIFF (LZW)sont requis pour visionner cette image.

13

Objet mixte : propriétés physiques

couleur

QuickTime™ et undécompresseur TIFF (LZW)sont requis pour visionner cette image.

14

Caractérisation intrinsèque

propriétés physiques

propriétésnumériques

dispositif d’entrée

dispositifde sortie

langagede sortie

langaged’entrée

15

Objet mixte : propriétés numériques

acquisesperceptibles

non acquisesnon perceptibles

acquisesnon perceptibles

non acquisesperceptibles

16

Objet mixte : propriétés numériques

[x, y]

QuickTime™ and aPNG decompressor

are needed to see this picture.

QuickTime™ and aPNG decompressor

are needed to see this picture.

17

Objet mixte : Autres caractérisations

Capitalisation de caractéristiques existantes

propriétés physiques

propriétésnumériques

dispositif d’entrée

dispositifde sortie

langagede sortie

langaged’entrée

18

Plan

• Introduction• Objet mixte

– Définition– Caractérisation intrinsèque

• Interagir avec un objet mixte– Définition– Caractérisation extrinsèque

• Conclusion

19

Interagir avec un objet mixte : définition

outil

objet de la tâche

action

réaction

tâche élémentaire

réponse

retour d’information

20

Interagir avec un objet mixte : définition

outil mixte

objet mixte de la tâche

langaged’interaction

en entrée

langaged’interaction

en sortie

dispositif d’interaction

21

Interagir avec un objet mixte : exemple

langaged’interaction

en entrée

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

[x, y]

caméra vision

proj.

[x-dome, y-dome]

déplacer le dôme en [x,y]

transf.

22

Plan

• Introduction• Objet mixte

– Définition– Caractérisation intrinsèque

• Interagir avec un objet mixte– Définition– Caractérisation extrinsèque

• Conclusion

23

Caractérisation extrinsèque

• Rôles• Métaphores

– Nom– Verbe– Affinement du nom

• Ports d’entrée

24

Interagir avec un objet mixte : Rôles

QuickTime™ and aPNG decompressor

are needed to see this picture.

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

QuickTime™ and aPhoto - JPEG decompressor

are needed to see this picture.

25

Caractérisation extrinsèque

• Rôle• Métaphores

– Nom– Verbe– Affinement du nom

• Ports d’entrée

26

Interagir avec un objet mixte : Métaphores

• Métaphore de nom– Un <x> dans le système est comme

un <x> dans le monde réel

27

Interagir avec un objet mixte : Métaphore de nom

langaged’interaction

en entrée

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

[x, y]

caméra vision

proj.

déplacer le dôme en [x,y]

transf.

[x-dome, y-dome]

28

Interagir avec un objet mixte : Métaphore de nom

déplacer la base d’ARN en [x,y]

langaged’interaction

en entrée[x, y]

caméra vision

proj. transf.

[x-base, y-base]

29

Caractérisation extrinsèque

• Rôle• Métaphores

– Nom– Verbe– Affinement du nom

• Ports d’entrée

30

Interagir avec un objet mixte : Métaphores

• Métaphore de verbe– <X>-er dans le système est comme

<x>-er dans le monde réel.

31

Interagir avec un objet mixte : Métaphore de verbe

gommer

langaged’interaction

en entrée

Mouvements reconnus

caméra vision

proj.

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

transf.

QuickTime™ and aPhoto - JPEG decompressor

are needed to see this picture.

32

Interagir avec un objet mixte : Métaphore de verbe

gommer

langaged’interaction

en entrée

[x,y]

caméra vision

proj.

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

transf.

formes

QuickTime™ and aPhoto - JPEG decompressor

are needed to see this picture.

33

Caractérisation extrinsèque

• Rôle• Métaphores

– Nom– Verbe– Affinement du nom

• Ports d’entrée

34

Interagir avec un objet mixte : Métaphores de nom

gommer

langaged’interaction

en entrée

Mouvementsreconnus

caméra vision

proj.

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

transf.

formes

QuickTime™ and aPhoto - JPEG decompressor

are needed to see this picture.

35

Interagir avec un objet mixte : Métaphores de nom

langaged’interaction

en entrée

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

[x, y]

caméra vision

proj.

déplacer le dome en [x,y]

transf.

[x-dome, y-dome]

36

Caractérisation extrinsèque

• Rôle• Métaphores

– Nom– Verbe– Affinement du nom

• Ports d’entrée

37

Interagir avec un objet mixte : Ports d’entrée physiques

propriétés physiques

propriétésnumériques

dispositif d’entrée

dispositifde sortie

langagede sortie

langaged’entrée

38

Interagir avec un objet mixte : Ports d’entrée physiques

caméra vision parordinateur

[x, y]

projecteur carré jaune

tableaimantée

position

activation

39

Interagir avec un objet mixte : Ports d’entrée physiques

caméra vision parordinateur

[x, y]

tableaimantée

position

activation

QuickTime™ and aPNG decompressor

are needed to see this picture.

40

propriétés physiques

propriétésnumériques

dispositif d’entrée

dispositifde sortie

langagede sortie

langaged’entrée

Interagir avec un objet mixte : Ports d’entrée numériques

langaged’interaction

41

Interagir avec un objet mixte : Ports d’entrée numériques

caméra vision parordinateur

[x, y]

projecteur carré jaune

tableaimantée activation

42

Interagir avec un objet mixte : Ports d’entrée numériques

[x, y]

caméra vision

43

Plan

• Introduction• Objet mixte

– Définition– Caractérisation intrinsèque

• Interagir avec un objet mixte– Définition– Caractérisation extrinsèque

• Conclusion et Perspectives

44

Conclusion

• Caractérisation intrinsèque– Propriétés physiques/numériques

• Caractérisation extrinsèque– Roles– Métaphores de nom/verbe– Ports d’entrées physiques/numériques

45

Conclusion

• Taxonomie– Repose sur le modèle d’interaction

mixte – Capitalise des taxonomies existantes – Sépare les caractéristiques

intrinsèques des caractéristiques extrinsèques

46

Perspectives

• Conception• Outil de prototypage

Interagir avec un objet mixte

Propriétés physiques et numériques

Céline Coutrix, Laurence NigayÉquipe Ingénierie de l’Interaction Homme-Machine (IIHM)Laboratoire d’Informatique de Grenoble (LIG)

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

QuickTime™ et undécompresseur TIFF (non compressé)sont requis pour visionner cette image.

Questions?