interagir avec un objet mixte propriétés physiques et numériques céline coutrix, laurence nigay...

47
Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de l’Interaction Homme-Machine (IIHM) Laboratoire d’Informatique de Grenoble (LIG) QuickTime™ et un décompresseur TIFF (non compressé) sont requis pour visionner cette image. QuickTime™ décompresseur sont requis po

Upload: degare-picot

Post on 03-Apr-2015

107 views

Category:

Documents


4 download

TRANSCRIPT

Page 1: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

Interagir avec un objet mixte

Propriétés physiques et numériques

Céline Coutrix, Laurence NigayÉquipe Ingénierie de l’Interaction Homme-Machine (IIHM)Laboratoire d’Informatique de Grenoble (LIG)

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

QuickTime™ et undécompresseur TIFF (non compressé)sont requis pour visionner cette image.

Page 2: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

2

QuickTime™ and aPhoto - JPEG decompressor

are needed to see this picture.

Introduction : systèmes mixtes

• fusion des mondes physique et numérique• beaucoup d’applications

Page 3: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

3

Introduction : Modèle d’Interaction

• Pouvoir descriptif

• Pouvoir génératif

• Pouvoir comparatif/taxinomique– Ensemble de caractéristiques

Page 4: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

4

QuickTime™ et undécompresseur codec YUV420

sont requis pour visionner cette image.

QuickTime™ et undécompresseur codec YUV420

sont requis pour visionner cette image.

Introduction : systèmes mixtes

QuickTime™ et undécompresseur TIFF (LZW)sont requis pour visionner cette image.QuickTime™ et un

décompresseur TIFF (non compressé)sont requis pour visionner cette image.

Page 5: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

5

Plan

• Introduction• Objet mixte

– Définition– Caractérisation intrinsèque

• Interagir avec un objet mixte– Définition– Caractérisation extrinsèque

• Conclusion

Page 6: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

6

Objet mixte : définition

objet physique

propriétésphysiques

objet numérique

propriétésnumériques

objet mixte

propriétésphysiques

propriétésnumériques?

• Modalités d’Interaction m = (d, l)

• parole = (microphone, langage pseudo-naturel)

Page 7: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

7

Objet mixte : définition

•Modalités de liaison

propriétés physiques

propriétésnumériques

dispositif d’entrée

dispositifde sortie

langagede sortie

langaged’entrée

Page 8: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

8

Objet mixte : exemple

caméra vision parordinateur

[x, y]

projecteur carré jaune

tableaimantée

activation

Page 9: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

9

Plan

• Introduction• Objet mixte

– Définition– Caractérisation intrinsèque

• Interagir avec un objet mixte– Définition– Caractérisation extrinsèque

• Conclusion

Page 10: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

10

Caractérisation intrinsèque

propriétés physiques

propriétésnumériques

dispositif d’entrée

dispositifde sortie

langagede sortie

langaged’entrée

Page 11: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

11

Objet mixte : propriétés physiques

non captéesgénérées

captéesnon générées

captéesgénérées

non captéesnon générées

Page 12: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

12

Objet mixte : propriétés physiques

position

QuickTime™ and aPNG decompressor

are needed to see this picture.

QuickTime™ et undécompresseur TIFF (LZW)sont requis pour visionner cette image.

Page 13: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

13

Objet mixte : propriétés physiques

couleur

QuickTime™ et undécompresseur TIFF (LZW)sont requis pour visionner cette image.

Page 14: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

14

Caractérisation intrinsèque

propriétés physiques

propriétésnumériques

dispositif d’entrée

dispositifde sortie

langagede sortie

langaged’entrée

Page 15: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

15

Objet mixte : propriétés numériques

acquisesperceptibles

non acquisesnon perceptibles

acquisesnon perceptibles

non acquisesperceptibles

Page 16: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

16

Objet mixte : propriétés numériques

[x, y]

QuickTime™ and aPNG decompressor

are needed to see this picture.

QuickTime™ and aPNG decompressor

are needed to see this picture.

Page 17: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

17

Objet mixte : Autres caractérisations

Capitalisation de caractéristiques existantes

propriétés physiques

propriétésnumériques

dispositif d’entrée

dispositifde sortie

langagede sortie

langaged’entrée

Page 18: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

18

Plan

• Introduction• Objet mixte

– Définition– Caractérisation intrinsèque

• Interagir avec un objet mixte– Définition– Caractérisation extrinsèque

• Conclusion

Page 19: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

19

Interagir avec un objet mixte : définition

outil

objet de la tâche

action

réaction

tâche élémentaire

réponse

retour d’information

Page 20: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

20

Interagir avec un objet mixte : définition

outil mixte

objet mixte de la tâche

langaged’interaction

en entrée

langaged’interaction

en sortie

dispositif d’interaction

Page 21: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

21

Interagir avec un objet mixte : exemple

langaged’interaction

en entrée

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

[x, y]

caméra vision

proj.

[x-dome, y-dome]

déplacer le dôme en [x,y]

transf.

Page 22: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

22

Plan

• Introduction• Objet mixte

– Définition– Caractérisation intrinsèque

• Interagir avec un objet mixte– Définition– Caractérisation extrinsèque

• Conclusion

Page 23: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

23

Caractérisation extrinsèque

• Rôles• Métaphores

– Nom– Verbe– Affinement du nom

• Ports d’entrée

Page 24: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

24

Interagir avec un objet mixte : Rôles

QuickTime™ and aPNG decompressor

are needed to see this picture.

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

QuickTime™ and aPhoto - JPEG decompressor

are needed to see this picture.

Page 25: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

25

Caractérisation extrinsèque

• Rôle• Métaphores

– Nom– Verbe– Affinement du nom

• Ports d’entrée

Page 26: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

26

Interagir avec un objet mixte : Métaphores

• Métaphore de nom– Un <x> dans le système est comme

un <x> dans le monde réel

Page 27: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

27

Interagir avec un objet mixte : Métaphore de nom

langaged’interaction

en entrée

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

[x, y]

caméra vision

proj.

déplacer le dôme en [x,y]

transf.

[x-dome, y-dome]

Page 28: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

28

Interagir avec un objet mixte : Métaphore de nom

déplacer la base d’ARN en [x,y]

langaged’interaction

en entrée[x, y]

caméra vision

proj. transf.

[x-base, y-base]

Page 29: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

29

Caractérisation extrinsèque

• Rôle• Métaphores

– Nom– Verbe– Affinement du nom

• Ports d’entrée

Page 30: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

30

Interagir avec un objet mixte : Métaphores

• Métaphore de verbe– <X>-er dans le système est comme

<x>-er dans le monde réel.

Page 31: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

31

Interagir avec un objet mixte : Métaphore de verbe

gommer

langaged’interaction

en entrée

Mouvements reconnus

caméra vision

proj.

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

transf.

QuickTime™ and aPhoto - JPEG decompressor

are needed to see this picture.

Page 32: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

32

Interagir avec un objet mixte : Métaphore de verbe

gommer

langaged’interaction

en entrée

[x,y]

caméra vision

proj.

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

transf.

formes

QuickTime™ and aPhoto - JPEG decompressor

are needed to see this picture.

Page 33: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

33

Caractérisation extrinsèque

• Rôle• Métaphores

– Nom– Verbe– Affinement du nom

• Ports d’entrée

Page 34: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

34

Interagir avec un objet mixte : Métaphores de nom

gommer

langaged’interaction

en entrée

Mouvementsreconnus

caméra vision

proj.

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

transf.

formes

QuickTime™ and aPhoto - JPEG decompressor

are needed to see this picture.

Page 35: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

35

Interagir avec un objet mixte : Métaphores de nom

langaged’interaction

en entrée

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

[x, y]

caméra vision

proj.

déplacer le dome en [x,y]

transf.

[x-dome, y-dome]

Page 36: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

36

Caractérisation extrinsèque

• Rôle• Métaphores

– Nom– Verbe– Affinement du nom

• Ports d’entrée

Page 37: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

37

Interagir avec un objet mixte : Ports d’entrée physiques

propriétés physiques

propriétésnumériques

dispositif d’entrée

dispositifde sortie

langagede sortie

langaged’entrée

Page 38: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

38

Interagir avec un objet mixte : Ports d’entrée physiques

caméra vision parordinateur

[x, y]

projecteur carré jaune

tableaimantée

position

activation

Page 39: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

39

Interagir avec un objet mixte : Ports d’entrée physiques

caméra vision parordinateur

[x, y]

tableaimantée

position

activation

QuickTime™ and aPNG decompressor

are needed to see this picture.

Page 40: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

40

propriétés physiques

propriétésnumériques

dispositif d’entrée

dispositifde sortie

langagede sortie

langaged’entrée

Interagir avec un objet mixte : Ports d’entrée numériques

langaged’interaction

Page 41: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

41

Interagir avec un objet mixte : Ports d’entrée numériques

caméra vision parordinateur

[x, y]

projecteur carré jaune

tableaimantée activation

Page 42: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

42

Interagir avec un objet mixte : Ports d’entrée numériques

[x, y]

caméra vision

Page 43: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

43

Plan

• Introduction• Objet mixte

– Définition– Caractérisation intrinsèque

• Interagir avec un objet mixte– Définition– Caractérisation extrinsèque

• Conclusion et Perspectives

Page 44: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

44

Conclusion

• Caractérisation intrinsèque– Propriétés physiques/numériques

• Caractérisation extrinsèque– Roles– Métaphores de nom/verbe– Ports d’entrées physiques/numériques

Page 45: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

45

Conclusion

• Taxonomie– Repose sur le modèle d’interaction

mixte – Capitalise des taxonomies existantes – Sépare les caractéristiques

intrinsèques des caractéristiques extrinsèques

Page 46: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

46

Perspectives

• Conception• Outil de prototypage

Page 47: Interagir avec un objet mixte Propriétés physiques et numériques Céline Coutrix, Laurence Nigay Équipe Ingénierie de lInteraction Homme-Machine (IIHM)

Interagir avec un objet mixte

Propriétés physiques et numériques

Céline Coutrix, Laurence NigayÉquipe Ingénierie de l’Interaction Homme-Machine (IIHM)Laboratoire d’Informatique de Grenoble (LIG)

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

QuickTime™ et undécompresseur TIFF (non compressé)sont requis pour visionner cette image.

Questions?