professoressa studenti f. pirri d. g. ferriero v. virili tutor m. pizzoli ricostruzione metrica 3d...

16
PROFESSORESSA STUDENTI F. Pirri D. G. Ferriero V. Virili TUTOR M. Pizzoli RICOSTRUZIONE METRICA 3D DI RICOSTRUZIONE METRICA 3D DI UN OGGETTO RIPRESO DA PIÙ UN OGGETTO RIPRESO DA PIÙ VISTE CON LA STESSA VISTE CON LA STESSA TELECAMERA TELECAMERA Corso di Laurea in Ingegnera dei Sistemi Progetto di Visione e Percezione Facoltà di Ingegneria

Upload: arsenio-mancuso

Post on 01-May-2015

215 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: PROFESSORESSA STUDENTI F. Pirri D. G. Ferriero V. Virili TUTOR M. Pizzoli RICOSTRUZIONE METRICA 3D DI UN OGGETTO RIPRESO DA PIÙ VISTE CON LA STESSA TELECAMERA

PROFESSORESSA STUDENTIF. Pirri D. G. Ferriero V. ViriliTUTORM. Pizzoli

RICOSTRUZIONE METRICA 3D RICOSTRUZIONE METRICA 3D DI UN OGGETTO RIPRESO DA DI UN OGGETTO RIPRESO DA

PIÙ VISTE CON LA STESSA PIÙ VISTE CON LA STESSA TELECAMERATELECAMERA

Corso di Laurea in Ingegnera dei Sistemi

Progetto di Visione e Percezione

Facoltà di Ingegneria

Page 2: PROFESSORESSA STUDENTI F. Pirri D. G. Ferriero V. Virili TUTOR M. Pizzoli RICOSTRUZIONE METRICA 3D DI UN OGGETTO RIPRESO DA PIÙ VISTE CON LA STESSA TELECAMERA

Obiettivi

• Ricostruzione metrica 3D stratificata– Confronto dei risultati con più oggetti

Page 3: PROFESSORESSA STUDENTI F. Pirri D. G. Ferriero V. Virili TUTOR M. Pizzoli RICOSTRUZIONE METRICA 3D DI UN OGGETTO RIPRESO DA PIÙ VISTE CON LA STESSA TELECAMERA

Indice

• Il problema della ricostruzione 3D• Sviluppo per due sperimentazioni• Conclusioni

Page 4: PROFESSORESSA STUDENTI F. Pirri D. G. Ferriero V. Virili TUTOR M. Pizzoli RICOSTRUZIONE METRICA 3D DI UN OGGETTO RIPRESO DA PIÙ VISTE CON LA STESSA TELECAMERA

Il problema della ricostruzione 3D

Page 5: PROFESSORESSA STUDENTI F. Pirri D. G. Ferriero V. Virili TUTOR M. Pizzoli RICOSTRUZIONE METRICA 3D DI UN OGGETTO RIPRESO DA PIÙ VISTE CON LA STESSA TELECAMERA

Indice

• Il problema della ricostruzione 3D• Sviluppo per due sperimentazioni• Conclusioni– Corrispondenze

– Matrice Fondamentale– Eliminazione false corrispondenze– Primo caso– Secondo caso

• Conclusioni

Page 6: PROFESSORESSA STUDENTI F. Pirri D. G. Ferriero V. Virili TUTOR M. Pizzoli RICOSTRUZIONE METRICA 3D DI UN OGGETTO RIPRESO DA PIÙ VISTE CON LA STESSA TELECAMERA

Corrispondenze

• SIFT - [Lowe99]

• Match – D. Lowe’s SIFT Keypoint Detector

Page 7: PROFESSORESSA STUDENTI F. Pirri D. G. Ferriero V. Virili TUTOR M. Pizzoli RICOSTRUZIONE METRICA 3D DI UN OGGETTO RIPRESO DA PIÙ VISTE CON LA STESSA TELECAMERA

Matrice Fondamentale

• La matrice fondamentale F lega una retta epipolare al punto che l’ha generata

• Per ogni coppia di punti corrispondenti vale

• Gli epipoli sono gli autovettori di F e F’ corrispondenti all’autovalore nullo

Page 8: PROFESSORESSA STUDENTI F. Pirri D. G. Ferriero V. Virili TUTOR M. Pizzoli RICOSTRUZIONE METRICA 3D DI UN OGGETTO RIPRESO DA PIÙ VISTE CON LA STESSA TELECAMERA

Eliminazione false corrispondenze

Page 9: PROFESSORESSA STUDENTI F. Pirri D. G. Ferriero V. Virili TUTOR M. Pizzoli RICOSTRUZIONE METRICA 3D DI UN OGGETTO RIPRESO DA PIÙ VISTE CON LA STESSA TELECAMERA

Indice• Il problema della ricostruzione 3D• Sviluppo per due sperimentazioni

– Corrispondenze– Matrice Fondamentale– Eliminazione false corrispondenze– Primo caso

• Conoscenza parametri intrinseci– Calibrazione della telecamera

• Matrice essenziale• Matrici di proiezione• Triangolazione

– Secondo caso

– Secondo caso

• Conclusioni

• Conclusioni

Page 10: PROFESSORESSA STUDENTI F. Pirri D. G. Ferriero V. Virili TUTOR M. Pizzoli RICOSTRUZIONE METRICA 3D DI UN OGGETTO RIPRESO DA PIÙ VISTE CON LA STESSA TELECAMERA

Primo caso

• Matrice di Calibrazione

• Matrice EssenzialeRicordando che

Per ottenere E:

Page 11: PROFESSORESSA STUDENTI F. Pirri D. G. Ferriero V. Virili TUTOR M. Pizzoli RICOSTRUZIONE METRICA 3D DI UN OGGETTO RIPRESO DA PIÙ VISTE CON LA STESSA TELECAMERA

Primo caso

• Matrici di proiezione– Matrici di Rotazione e Traslazione

fattorizzando E tramite decomposizione SVD

• Quattro casi possibili

dove u3 è la terza colonna di U e W:

Page 12: PROFESSORESSA STUDENTI F. Pirri D. G. Ferriero V. Virili TUTOR M. Pizzoli RICOSTRUZIONE METRICA 3D DI UN OGGETTO RIPRESO DA PIÙ VISTE CON LA STESSA TELECAMERA

Primo caso

• Triangolazione

Page 13: PROFESSORESSA STUDENTI F. Pirri D. G. Ferriero V. Virili TUTOR M. Pizzoli RICOSTRUZIONE METRICA 3D DI UN OGGETTO RIPRESO DA PIÙ VISTE CON LA STESSA TELECAMERA

Indice

• Il problema della ricostruzione 3D

• Sviluppo per due sperimentazioni– Corrispondenze– Matrice Fondamentale– Eliminazione false corrispondenze– Primo caso– Secondo caso

• Conclusioni

• Spazio proiettivo• Spazio affine • Spazio euclideo

• Conclusioni

Page 14: PROFESSORESSA STUDENTI F. Pirri D. G. Ferriero V. Virili TUTOR M. Pizzoli RICOSTRUZIONE METRICA 3D DI UN OGGETTO RIPRESO DA PIÙ VISTE CON LA STESSA TELECAMERA

Secondo caso

• Spazio proiettivo– Calcolo di P da F

• Spazio affine

• Spazio euclideo

Page 15: PROFESSORESSA STUDENTI F. Pirri D. G. Ferriero V. Virili TUTOR M. Pizzoli RICOSTRUZIONE METRICA 3D DI UN OGGETTO RIPRESO DA PIÙ VISTE CON LA STESSA TELECAMERA

Indice

• Il problema della ricostruzione 3D• Sviluppo per due sperimentazioni• Conclusioni

– Osservazioni sui risultati

Page 16: PROFESSORESSA STUDENTI F. Pirri D. G. Ferriero V. Virili TUTOR M. Pizzoli RICOSTRUZIONE METRICA 3D DI UN OGGETTO RIPRESO DA PIÙ VISTE CON LA STESSA TELECAMERA

Conclusioni

• Abbiamo ottenuto un risultato concreto dal dataset dell’oggetto assegnato tramite ricostruzione metrica 3D diretta

• Abbiamo riscontrato problemi analitici per il riferimento delle telecamere nella trasformazione proiettiva