comprendre la vidéo numériquewpuech/enseignement/master... · comprendre la vidéo numérique i...

33
Introduction: Définition de la 3D Historique de 3D numérique Intérêt de la 3D numérique Système Visuel Humain: Vidéio 3D ou relief Stéréopsie et physiologie de la 3D Processus de production d’une vidéo 3D : Pipeline de génération d’une vidéo 3D Acquisition d’une vidéo 3D Représentation d’une vidéo 3D Codage et transmission d’une vidéo 3D Rendu et affichage d’une vidéo 3D CONTACT : Email : [email protected] http://www2.lirmm.fr/~kouider Comprendre la Vidéo Numérique La vidéo 3D (2 ème partie - Cours 4 )

Upload: others

Post on 22-Jul-2020

0 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Introduction:

Définition de la 3D

Historique de 3D numérique

Intérêt de la 3D numérique

Système Visuel Humain:

Vidéio 3D ou relief

Stéréopsie et physiologie de la 3D

Processus de production d’une vidéo 3D :

Pipeline de génération d’une vidéo 3D

Acquisition d’une vidéo 3D

Représentation d’une vidéo 3D

Codage et transmission d’une vidéo 3D

Rendu et affichage d’une vidéo 3D

CONTACT : Email : [email protected]

http://www2.lirmm.fr/~kouider

Comprendre la Vidéo Numérique

La vidéo 3D (2ème partie - Cours 4 )

Page 2: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Introduction:

Définition de la 3D

Historique de 3D numérique

Intérêt de la 3D numérique

Système Visuel Humain:

Vidéio 3D ou relief

Stéréopsie et physiologie de la 3D

Processus de production d’une vidéo 3D :

Pipeline de génération d’une vidéo 3D

Acquisition d’une vidéo 3D

Représentation d’une vidéo 3D

Codage et transmission d’une vidéo 3D

Rendu et affichage d’une vidéo 3D

CONTACT : Email : [email protected]

http://www2.lirmm.fr/~kouider

Comprendre la Vidéo Numérique

La vidéo 3D (2ème partie - Cours 4 )

Page 3: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 3

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Introduction à la 3D – Définition

Page 4: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 4

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Introduction à la 3D – Un peu d’Histoire

Page 5: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 5

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Introduction à la – Pourquoi un tel Intérêt à la 3D ?

Page 6: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Introduction:

Définition de la 3D

Historique de 3D numérique

Intérêt de la 3D numérique

Système Visuel Humain:

Vidéio 3D ou relief

Stéréopsie et physiologie de la 3D

Processus de production d’une vidéo 3D :

Pipeline de génération d’une vidéo 3D

Acquisition d’une vidéo 3D

Représentation d’une vidéo 3D

Codage et transmission d’une vidéo 3D

Rendu et affichage d’une vidéo 3D

CONTACT : Email : [email protected]

http://www2.lirmm.fr/~kouider

Comprendre la Vidéo Numérique

La vidéo 3D (2ème partie - Cours 4 )

Page 7: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 7

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Système Visuel Humain – 3D ou relief

La profondeur, le relief, le volume ne sont pas présents dans l’image rétinienne. Le système visuel les reconstruit.

Page 8: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 8

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Système Visuel Humain – Stéréopsie et physiologie de la 3D

Le système visuel humain (HVS) est un système complexe. La perception du relief mobilise :

Sources subjectives

- Indices psychophysiques (théorie de Gestalt).

Page 9: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 9

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Système Visuel Humain – Stéréopsie et physiologie de la 3D

Le système visuel humain (HVS) est un système complexe. La perception du relief mobilise :

Sources subjectives

- Indices psychophysiques (théorie de Gestalt.

- Indices géométriques

Page 10: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 10

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Système Visuel Humain – Stéréopsie et physiologie de la 3D

Le système visuel humain (HVS) est un système complexe. La perception du relief mobilise :

Sources subjectives

- Indices psychophysiques (théorie de Gestalt.

- Indices géométriques

- Indices dynamiques

- parallaxe monoculaire de mouvement

- expansion – contraction

Page 11: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 11

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Système Visuel Humain – Stéréopsie et physiologie de la 3D

Le système visuel humain (HVS) est un système complexe. La perception du relief mobilise :

Sources subjectives

- Indices psychophysiques (théorie de Gestalt.

- Indices géométriques

- Indices dynamiques

- parallaxe monoculaire de mouvement

- expansion – contraction

Sources objectives

- Informations oculaires

- Convergence

- Accommodation

Page 12: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 12

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Système Visuel Humain – Stéréopsie et physiologie de la 3D

Le système visuel humain (HVS) est un système complexe. La perception du relief mobilise :

Sources subjectives

- Indices psychophysiques (théorie de Gestalt.

- Indices géométriques

- Indices dynamiques

- parallaxe monoculaire de mouvement

- expansion – contraction

Sources objectives

- Informations oculaires

- Convergence

- Accommodation

Page 13: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 13

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Système Visuel Humain – Stéréopsie et physiologie de la 3D

Le système visuel humain (HVS) est un système complexe. La perception du relief mobilise :

Sources subjectives

- Indices psychophysiques (théorie de Gestalt.

- Indices géométriques

- Indices dynamiques

- parallaxe monoculaire de mouvement

- expansion – contraction

Sources objectives

- Informations oculaires

- Convergence

- Accommodation

- Informations stéréoscopiques

- Vision binoculaire

- Disparité rétinienne

Page 14: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 14

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Système Visuel Humain – Stéréopsie et physiologie de la 3D

Le système visuel humain (HVS) est un système complexe. La perception du relief mobilise :

Sources subjectives

- Indices psychophysiques (théorie de Gestalt.

- Indices géométriques

- Indices dynamiques

- parallaxe monoculaire de mouvement

- expansion – contraction

Sources objectives

- Informations oculaires

- Convergence

- Accommodation

- Informations stéréoscopiques

- Vision binoculaire

- Disparité rétinienne

Limites physiologiques

- angle de vue limité

Page 15: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Introduction:

Définition de la 3D

Historique de 3D numérique

Intérêt de la 3D numérique

Système Visuel Humain:

Vidéio 3D ou relief

Stéréopsie et physiologie de la 3D

Processus de production d’une vidéo 3D :

Pipeline de génération d’une vidéo 3D

Acquisition d’une vidéo 3D

Représentation d’une vidéo 3D

Codage et transmission d’une vidéo 3D

Rendu et affichage d’une vidéo 3D

CONTACT : Email : [email protected]

http://www2.lirmm.fr/~kouider

Comprendre la Vidéo Numérique

La vidéo 3D (2ème partie - Cours 4 )

Page 16: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 16

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Processus de production d’une vidéo 3D – Pipeline

Scène

Capture de la scène 3D

Rendu & Affichage 3D Codage & Transmission

Page 17: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 17

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Processus de production d’une vidéo 3D – Pipeline

Page 18: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 18

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Processus de production d’une vidéo 3D – Acquisition d’une vidéo 3D

Capture de la scène 3D

Rendu & Affichage 3D Codage & Transmission

Page 19: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 19

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Processus de production d’une vidéo 3D – Acquisition d’une vidéo 3D

Stéréoscopie et prises de vue multiples:

3 types de géométrie de prises de vue multiples

Page 20: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 20

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Processus de production d’une vidéo 3D – Acquisition d’une vidéo 3D

Stéréoscopie et prises de vue multiples:

Principe de la stéréoscopie

Page 21: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 21

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Processus de production d’une vidéo 3D – Acquisition d’une vidéo 3D

Stéréoscopie et prises de vue multiples:

Page 22: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 22

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Processus de production d’une vidéo 3D – Acquisition d’une vidéo 3D

Stéréoscopie et prises de vue multiples:

Image gauche Image droite

Page 23: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 23

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Processus de production d’une vidéo 3D – Acquisition d’une vidéo 3D

Stéréoscopie et prises de vue multiples:

Capture multivues

Page 24: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 24

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Processus de production d’une vidéo 3D – Acquisition d’une vidéo 3D

Modèles de caméras utilisés:

Page 25: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 25

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Processus de production d’une vidéo 3D – Représentation et reconstitution

Capture de la scène 3D

Rendu & Affichage 3D Codage & Transmission

Représentation et reconstitution 3D

Page 26: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 26

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Processus de production d’une vidéo 3D – Représentation et reconstitution

Image 2D + Carte de profondeur associée

Maillage 3D et Texture

Page 27: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 27

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Processus de production d’une vidéo 3D – Représentation et reconstitution

Page 28: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 28

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Processus de production d’une vidéo 3D – Codage et transmission

Capture de la scène 3D

Rendu & Affichage 3D Codage & Transmission

Page 29: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 29

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Processus de production d’une vidéo 3D – Codage et transmission

Compression des données:

Page 30: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 30

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Processus de production d’une vidéo 3D – Codage et transmission

Compression des données:

Page 31: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 31

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Processus de production d’une vidéo 3D – Rendu et affichage

Capture de la scène 3D

Rendu & Affichage 3D Codage & Transmission

Page 32: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 32

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Processus de production d’une vidéo 3D – Rendu et affichage

HOLOGRAMME 3D Casque vidéo 3D

Lunettes de vision 3D

Page 33: Comprendre la Vidéo Numériquewpuech/enseignement/master... · Comprendre la Vidéo Numérique I – Introduction II – Système visuel humain III – Processus de production d’une

Sarra Kouider PAGE 32

Comprendre la Vidéo Numérique

I – Introduction II – Système visuel humain III – Processus de production d’une vidéo 3D

Références

« Digital Video and Television », Ioannis Pitas.

Présentation : «Vidéo 3D, De l’acquisition à la diffusion », Laurent Lucas, 3DTV, CORESA 2013.