47
Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de l’Interaction Homme-Machine (IIHM) Laboratoire d’Informatique de Grenoble (LIG) QuickTime™ et un décompresseur TIFF (non compressé) sont requis pour visionner cette image. QuickTime™ décompresseur sont requis po

Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

Embed Size (px)

Citation preview

Page 1: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

Interagir avec un objet mixte

Propriétés physiques et numériques

Céline Coutrix, Laurence NigayÉquipe Ingénierie de l’Interaction Homme-Machine (IIHM)Laboratoire d’Informatique de Grenoble (LIG)

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

QuickTime™ et undécompresseur TIFF (non compressé)sont requis pour visionner cette image.

Page 2: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

2

QuickTime™ and aPhoto - JPEG decompressor

are needed to see this picture.

Introduction : systèmes mixtes

• fusion des mondes physique et numérique• beaucoup d’applications

Page 3: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

3

Introduction : Modèle d’Interaction

• Pouvoir descriptif

• Pouvoir génératif

• Pouvoir comparatif/taxinomique– Ensemble de caractéristiques

Page 4: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

4

QuickTime™ et undécompresseur codec YUV420

sont requis pour visionner cette image.

QuickTime™ et undécompresseur codec YUV420

sont requis pour visionner cette image.

Introduction : systèmes mixtes

QuickTime™ et undécompresseur TIFF (LZW)sont requis pour visionner cette image.QuickTime™ et un

décompresseur TIFF (non compressé)sont requis pour visionner cette image.

Page 5: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

5

Plan

• Introduction• Objet mixte

– Définition– Caractérisation intrinsèque

• Interagir avec un objet mixte– Définition– Caractérisation extrinsèque

• Conclusion

Page 6: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

6

Objet mixte : définition

objet physique

propriétésphysiques

objet numérique

propriétésnumériques

objet mixte

propriétésphysiques

propriétésnumériques?

• Modalités d’Interaction m = (d, l)

• parole = (microphone, langage pseudo-naturel)

Page 7: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

7

Objet mixte : définition

•Modalités de liaison

propriétés physiques

propriétésnumériques

dispositif d’entrée

dispositifde sortie

langagede sortie

langaged’entrée

Page 8: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

8

Objet mixte : exemple

caméra vision parordinateur

[x, y]

projecteur carré jaune

tableaimantée

activation

Page 9: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

9

Plan

• Introduction• Objet mixte

– Définition– Caractérisation intrinsèque

• Interagir avec un objet mixte– Définition– Caractérisation extrinsèque

• Conclusion

Page 10: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

10

Caractérisation intrinsèque

propriétés physiques

propriétésnumériques

dispositif d’entrée

dispositifde sortie

langagede sortie

langaged’entrée

Page 11: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

11

Objet mixte : propriétés physiques

non captéesgénérées

captéesnon générées

captéesgénérées

non captéesnon générées

Page 12: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

12

Objet mixte : propriétés physiques

position

QuickTime™ and aPNG decompressor

are needed to see this picture.

QuickTime™ et undécompresseur TIFF (LZW)sont requis pour visionner cette image.

Page 13: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

13

Objet mixte : propriétés physiques

couleur

QuickTime™ et undécompresseur TIFF (LZW)sont requis pour visionner cette image.

Page 14: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

14

Caractérisation intrinsèque

propriétés physiques

propriétésnumériques

dispositif d’entrée

dispositifde sortie

langagede sortie

langaged’entrée

Page 15: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

15

Objet mixte : propriétés numériques

acquisesperceptibles

non acquisesnon perceptibles

acquisesnon perceptibles

non acquisesperceptibles

Page 16: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

16

Objet mixte : propriétés numériques

[x, y]

QuickTime™ and aPNG decompressor

are needed to see this picture.

QuickTime™ and aPNG decompressor

are needed to see this picture.

Page 17: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

17

Objet mixte : Autres caractérisations

Capitalisation de caractéristiques existantes

propriétés physiques

propriétésnumériques

dispositif d’entrée

dispositifde sortie

langagede sortie

langaged’entrée

Page 18: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

18

Plan

• Introduction• Objet mixte

– Définition– Caractérisation intrinsèque

• Interagir avec un objet mixte– Définition– Caractérisation extrinsèque

• Conclusion

Page 19: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

19

Interagir avec un objet mixte : définition

outil

objet de la tâche

action

réaction

tâche élémentaire

réponse

retour d’information

Page 20: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

20

Interagir avec un objet mixte : définition

outil mixte

objet mixte de la tâche

langaged’interaction

en entrée

langaged’interaction

en sortie

dispositif d’interaction

Page 21: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

21

Interagir avec un objet mixte : exemple

langaged’interaction

en entrée

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

[x, y]

caméra vision

proj.

[x-dome, y-dome]

déplacer le dôme en [x,y]

transf.

Page 22: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

22

Plan

• Introduction• Objet mixte

– Définition– Caractérisation intrinsèque

• Interagir avec un objet mixte– Définition– Caractérisation extrinsèque

• Conclusion

Page 23: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

23

Caractérisation extrinsèque

• Rôles• Métaphores

– Nom– Verbe– Affinement du nom

• Ports d’entrée

Page 24: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

24

Interagir avec un objet mixte : Rôles

QuickTime™ and aPNG decompressor

are needed to see this picture.

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

QuickTime™ and aPhoto - JPEG decompressor

are needed to see this picture.

Page 25: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

25

Caractérisation extrinsèque

• Rôle• Métaphores

– Nom– Verbe– Affinement du nom

• Ports d’entrée

Page 26: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

26

Interagir avec un objet mixte : Métaphores

• Métaphore de nom– Un <x> dans le système est comme

un <x> dans le monde réel

Page 27: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

27

Interagir avec un objet mixte : Métaphore de nom

langaged’interaction

en entrée

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

[x, y]

caméra vision

proj.

déplacer le dôme en [x,y]

transf.

[x-dome, y-dome]

Page 28: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

28

Interagir avec un objet mixte : Métaphore de nom

déplacer la base d’ARN en [x,y]

langaged’interaction

en entrée[x, y]

caméra vision

proj. transf.

[x-base, y-base]

Page 29: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

29

Caractérisation extrinsèque

• Rôle• Métaphores

– Nom– Verbe– Affinement du nom

• Ports d’entrée

Page 30: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

30

Interagir avec un objet mixte : Métaphores

• Métaphore de verbe– <X>-er dans le système est comme

<x>-er dans le monde réel.

Page 31: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

31

Interagir avec un objet mixte : Métaphore de verbe

gommer

langaged’interaction

en entrée

Mouvements reconnus

caméra vision

proj.

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

transf.

QuickTime™ and aPhoto - JPEG decompressor

are needed to see this picture.

Page 32: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

32

Interagir avec un objet mixte : Métaphore de verbe

gommer

langaged’interaction

en entrée

[x,y]

caméra vision

proj.

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

transf.

formes

QuickTime™ and aPhoto - JPEG decompressor

are needed to see this picture.

Page 33: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

33

Caractérisation extrinsèque

• Rôle• Métaphores

– Nom– Verbe– Affinement du nom

• Ports d’entrée

Page 34: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

34

Interagir avec un objet mixte : Métaphores de nom

gommer

langaged’interaction

en entrée

Mouvementsreconnus

caméra vision

proj.

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

transf.

formes

QuickTime™ and aPhoto - JPEG decompressor

are needed to see this picture.

Page 35: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

35

Interagir avec un objet mixte : Métaphores de nom

langaged’interaction

en entrée

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

[x, y]

caméra vision

proj.

déplacer le dome en [x,y]

transf.

[x-dome, y-dome]

Page 36: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

36

Caractérisation extrinsèque

• Rôle• Métaphores

– Nom– Verbe– Affinement du nom

• Ports d’entrée

Page 37: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

37

Interagir avec un objet mixte : Ports d’entrée physiques

propriétés physiques

propriétésnumériques

dispositif d’entrée

dispositifde sortie

langagede sortie

langaged’entrée

Page 38: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

38

Interagir avec un objet mixte : Ports d’entrée physiques

caméra vision parordinateur

[x, y]

projecteur carré jaune

tableaimantée

position

activation

Page 39: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

39

Interagir avec un objet mixte : Ports d’entrée physiques

caméra vision parordinateur

[x, y]

tableaimantée

position

activation

QuickTime™ and aPNG decompressor

are needed to see this picture.

Page 40: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

40

propriétés physiques

propriétésnumériques

dispositif d’entrée

dispositifde sortie

langagede sortie

langaged’entrée

Interagir avec un objet mixte : Ports d’entrée numériques

langaged’interaction

Page 41: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

41

Interagir avec un objet mixte : Ports d’entrée numériques

caméra vision parordinateur

[x, y]

projecteur carré jaune

tableaimantée activation

Page 42: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

42

Interagir avec un objet mixte : Ports d’entrée numériques

[x, y]

caméra vision

Page 43: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

43

Plan

• Introduction• Objet mixte

– Définition– Caractérisation intrinsèque

• Interagir avec un objet mixte– Définition– Caractérisation extrinsèque

• Conclusion et Perspectives

Page 44: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

44

Conclusion

• Caractérisation intrinsèque– Propriétés physiques/numériques

• Caractérisation extrinsèque– Roles– Métaphores de nom/verbe– Ports d’entrées physiques/numériques

Page 45: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

45

Conclusion

• Taxonomie– Repose sur le modèle d’interaction

mixte – Capitalise des taxonomies existantes – Sépare les caractéristiques

intrinsèques des caractéristiques extrinsèques

Page 46: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

46

Perspectives

• Conception• Outil de prototypage

Page 47: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

Interagir avec un objet mixte

Propriétés physiques et numériques

Céline Coutrix, Laurence NigayÉquipe Ingénierie de l’Interaction Homme-Machine (IIHM)Laboratoire d’Informatique de Grenoble (LIG)

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

QuickTime™ et undécompresseur TIFF (non compressé)sont requis pour visionner cette image.

Questions?