reconstruction 3d par vision avec des trajectoires hautement contraintes joan solà et andré monin...

30
Reconstruction 3D par Reconstruction 3D par vision avec des vision avec des trajectoires hautement trajectoires hautement contraintes contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

Upload: alfonso-gimenez-vega

Post on 25-Jan-2016

214 views

Category:

Documents


1 download

TRANSCRIPT

Page 1: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

Reconstruction 3D par vision Reconstruction 3D par vision avec des trajectoires avec des trajectoires

hautement contrainteshautement contraintes

Reconstruction 3D par vision Reconstruction 3D par vision avec des trajectoires avec des trajectoires

hautement contrainteshautement contraintes

Joan Solà et André MoninLAAS-CNRS

Toulouse, France

Page 2: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

On parle de…On parle de…

1. SLAM par mesures angulaires (ou SLAM par mono vision)

2. Initialisation des Amers

3. Performances:

FDPs Gaussiennes

4. Affronter des situations difficilesSLAM-FKE est notre choix

Page 3: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

ContenuContenu

» Un peu de SLAM à observabilité totale

» Le Problème de l’initialisation des amers dans le SLAM par mesures angulaires

» Le Rayon Géométrique: une représentation efficiente de la FDP de la position de l’amer

» Méthodes retardées et non retardées

» Solution Temps Réel:

• L'initialisation par Partage Fédératif de l’Information (PFI)

Page 4: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

Les motivationsLes motivations

Page 5: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

Les motivationsLes motivations

Page 6: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

Les motivationsLes motivations

Page 7: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

Les motivationsLes motivations

Page 8: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

Les motivationsLes motivations

Page 9: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

Les motivationsLes motivations

Page 10: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

SLAM: Simultaneous Localization And Mapping

SLAM: Simultaneous Localization And Mapping

1

2

34

5

1

2

3

4

R

5

Page 11: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

Le problème du cas angulaire:Initialisation des Amers

Le problème du cas angulaire:Initialisation des Amers

• L’approche naïve

?

Te

tactuel

tprecedent tactuel

?

Page 12: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

Le problème:Initialisation des Amers

Le problème:Initialisation des Amers

• Considération des incertitudes

tactuel

tprecedent tactuel

Te

Le point 3DLe point 3Dest dedansest dedans

?

Page 13: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

Le problème:Initialisation des Amers

Le problème:Initialisation des Amers

• Les cas Content et Pas Content

Content

Peu Content

Pas Content

Page 14: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

Méthodes retardés i immédiatsMéthodes retardés i immédiats

Feliç

No Tan Feliç

Infeliç

retardats

retardats

immédiats

immédiats

immédiats

Page 15: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

L'idée CLÉL'idée CLÉ

QuickTime™ and aTIFF (LZW) decompressor

are needed to see this picture.

QuickTime™ and aTIFF (LZW) decompressor

are needed to see this picture.

QuickTime™ and aTIFF (LZW) decompressor

are needed to see this picture.

QuickTime™ and aTIFF (LZW) decompressor

are needed to see this picture.??

L’approximationinitiale

est facile

La sélection des membres est facile et sûre

Le derniermembreest facilementincorporé

Initialisationnon retardée

INITIALISATIONretardée

Page 16: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

Definició del Raig GeomètricDefinició del Raig Geomètric

Définir une série geomètrica de Gaussiennes

xR : position de la camera

4r4

3r3

= i / ri

= ri / ri-1

[ rmin rmax ]

Omplir l’espai entre rmin i rmax

1. Amb el mínim nombre de termes

2. Respectant les restriccions de linearització

[Peach]

Page 17: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

• Relation d’aspecte, la base géométrique et limites de distance

• Le nombre de termes est logarithmique en rmax / rmin :

• On obtient des nombres très petits :

• Les membres étant Gaussiens, ils sont facilement manipulables avec

FKE.

Les bénéfices du Rayon Géométrique

Les bénéfices du Rayon Géométrique

Scenario rmin rmax Ratio Ng

Intérieur 0.5 5 10 3

Extérieur 1 100 100 5

Longue portée 1 1000 1000 7

[rmin , rmax]

Ng = f( log(rmax / rmin)

1

2

Page 18: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

Com funcionaCom funciona

La primera observació determina el Raig Cònic

Page 19: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

Aproximo el Raig Cònicamb el Raig Geomètric

Puc inicialitzar els membres ara:obtindré un mètode immediat.

3

Com funcionaCom funciona

C = 1Ng

Page 20: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

Em moc i faig unasegona observació

Puc distingir els membres a la imatge

Com funcionaCom funciona

Page 21: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

Calculo versemblances iactualitzo credibilitats

Que és com modificar la forma del Raig

C+ = C ⋅λ

Com funcionaCom funciona

λ = 1

2π Ze

−z⋅Z −1 ⋅ ′ z

2

Page 22: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

Elimino els membres inversemblants

Que és una operació trivial i segura

Com funcionaCom funciona

C <0.001

nombre _ de _ termes

Page 23: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

Amb mètodes immédiatspuc corregir el mapa SLAM

Com funcionaCom funciona

Page 24: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

Vaig fent...

Com funcionaCom funciona

Page 25: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

I un dia o altre només quedarà un sol membre.

Aquest membre ja és Gaussià!

Si l’inicialitzo ara, tindré un mètode retardat

Com funcionaCom funciona

3

Page 26: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

Méthodes retardées et NON retardées

Méthodes retardées et NON retardées

• Un algorithme naïve

• Un algorithme consistent

• L’algorithme d’Actualisation en Bloc

reta

rdées

Non

reta

rdées

• L’algorithme multicarte

• L’algorithme du Partage Fédératif de l’Information

Page 27: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

QuickTime™ and aTIFF (LZW) decompressor

are needed to see this picture.

L’algorithme multicarteL’algorithme multicarte

1. Initialiser tous les membres comme amers en cartes séparées2. Lors des observations postérieures:

• Actualiser les crédibilités des cartes et n’éliminer les mauvaises• Réaliser des corrections sur les cartes comme dans SLAM-FKE

3. Quand il ne reste qu’une carte:• Rien à faire

QuickTime™ and aTIFF (LZW) decompressor

are needed to see this picture.MéTHODe hors ligne

Non

reta

rdée

Page 28: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

QuickTime™ and aTIFF (LZW) decompressor

are needed to see this picture.

L'algorithme du Partage Fédératif de l’Information (PFI)

L'algorithme du Partage Fédératif de l’Information (PFI)1. Initialiser les membres comme des amers différents

dans la même carte2. Lors des observations postérieures :

• Actualiser les crédibilités et éliminer les mauvais membres• Effectuer une correction douce fédérée

3. Quand il ne reste qu’un membre:• Rien à faire

QuickTime™ and aTIFF (LZW) decompressor

are needed to see this picture.

Non

reta

rdée

Page 29: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

L'algorithme PFIL'algorithme PFI

• La Correction Douce Fédérée: Partager l’Information

Observation {y, R}

correction FKE avec membre 1

correction FKE avec membre 2

correction FKE avec membre NNon

reta

rdée

{y, R1 }{y, R2 }

{y, RN }

… …

Partage de l’Information:

Coefficient Fédératif i :

Privilège des vraisemblances:

Page 30: Reconstruction 3D par vision avec des trajectoires hautement contraintes Joan Solà et André Monin LAAS-CNRS Toulouse, France

L'algorithme RFIi el Cas Infeliç

L'algorithme RFIi el Cas Infeliç

Vista lateralVista d’ocell

immediat