Modélisation 4D à partir de plusieurs caméras - TEL - Thèses en ligne Accéder directement au contenu
Thèse Année : 2012

4D modeling of dynamic scenes using multi-camera setups

Modélisation 4D à partir de plusieurs caméras

Résumé

Nowadays mutli-camera setups allow the acquisition of both color image streams and 3D models streams. Thus permitting the study of complex scenes. These scenes can be composed of any number of non-rigid objects moving freely. One of the main limitations of such data is its lack of temporal coherence between two consecutive observations. The work presented in this thesis consider this issue and propose novel methods to recover this temporal coherence. First we present a new approach that computes at each frame a dense motion field over the surface of the scene (i.e. Scene Flow), gathering both photometric and geometric information. We then extend this approach to hybrid multi-camera setups composed of color and depth sensor (such as the kinect sensor). Second, we introduce "Progressive Shape Models", a new method that allows to gather topology information over a complete sequence of 3D models and incrementally build a complete and coherent surface template.
Les systèmes multi-caméras permettent de nos jours d'obtenir à la fois des flux d'images couleur mais aussi des flux de modèles 3D. Ils permettent ainsi l'étude de scènes complexes à la fois de par les éléments qui la composent mais aussi de par les mouvements et les déformations que subissent ces éléments au fil du temps. Une des principales limitations de ces données est le manque de cohérence temporelle entre les observations obtenues à deux instants de temps successifs. Les travaux présentés dans cette thèse proposent des pistes pour retrouver cette cohérence temporelle. Dans un premier temps nous nous sommes penchés sur le problème de l'estimation de champs de déplacement denses à la surface des objets de la scène. L'approche que nous proposons permet de combiner efficacement des informations photométriques provenant des caméras avec des informations géométriques. Cette méthode a été étendue, par la suite, au cas de systèmes multi-caméras hybrides composés de capteurs couleurs et de profondeur (tel que le capteur kinect). Dans un second temps nous proposons une méthode nouvelle permettant l'apprentissage de la vraie topologie d'une scène dynamique au fil d'une séquence de données 4D (3D + temps). Ces travaux permettent de construire au fur et à mesure des observations un modèle de référence de plus en plus complet de la scène observée.
Fichier principal
Vignette du fichier
these.pdf (7.5 Mo) Télécharger le fichier
Vignette du fichier
teaser.jpg (10.13 Ko) Télécharger le fichier
Format : Figure, Image

Dates et versions

tel-00776075 , version 1 (15-01-2013)
tel-00776075 , version 2 (09-09-2013)

Identifiants

  • HAL Id : tel-00776075 , version 1

Citer

Antoine Letouzey. Modélisation 4D à partir de plusieurs caméras. Vision par ordinateur et reconnaissance de formes [cs.CV]. Université de Grenoble, 2012. Français. ⟨NNT : ⟩. ⟨tel-00776075v1⟩
554 Consultations
1191 Téléchargements

Partager

Gmail Facebook X LinkedIn More