Geometric Approaches for 3D Human Motion Analysis: Application to Action Recognition and Retrieval - TEL - Thèses en ligne Accéder directement au contenu
Thèse Année : 2014

Geometric Approaches for 3D Human Motion Analysis: Application to Action Recognition and Retrieval

Approches Géométriques pour l'Analyse du Mouvement Humain en 3D: Application à la Reconnaissance d'Action et l’Indexation

Rim Slama
  • Fonction : Autre
  • PersonId : 1246416
  • IdHAL : rim-slama

Résumé

In this thesis, we focus on the development of adequate geometric frameworks in order to model and compare accurately human motion acquired from 3D sensors. In the first framework, we address the problem of pose/motion retrieval in full 3D reconstructed sequences. The human shape representation is formulated using Extremal Human Curve (EHC) descriptor extracted from the body surface. It allows efficient shape to shape comparison taking benefits from Riemannian geometry in the open curve shape space. As each human pose represented by this descriptor is viewed as a point in the shape space, we propose to model the motion sequence by a trajectory on this space. Dynamic Time Warping in the feature vector space is then used to compare different motions. In the second framework, we propose a solution for action and gesture recognition from both skeleton and depth data acquired by low cost cameras such as Microsoft Kinect. The action sequence is represented by a dynamical system whose observability matrix is characterized as an element of a Grassmann manifold. Thus, recognition problem is reformulated as a point classification on this manifold. Here, a new learning algorithm based on the notion of tangent spaces is proposed to improve recognition task. Performances of our approach on several benchmarks show high recognition accuracy with low latency.
Dans le cadre de cette thèse, nous proposons des approches géométriques permettant d0analyser des mouvements humains à partir de données issues de capteurs 3D. Premièrement, nous abordons le problème de comparaison de poses et de mouvements dans des séquences contenant des modèles de corps humain en 3D. En introduisant un nouveau descripteur, appelé Extremal Hu- man Curve (EHC), la forme du corps humain dans une pose donnée est décrite par une collection de courbes. Ces courbes extraites de la surface du maillage relient les points se situant aux extrémités du corps. Dans un formalisme Riemannien, chacune de ces courbes est considérée comme un point dans un espace de formes offrant la possibilité de les comparer. Par ailleurs, les actions sont modélisées par des trajectoires dans cet espace, où elles sont comparées en utilisant la déformation temporelle dynamique. Deuxièmement, nous proposons une approche de reconnaissance d0actions et de gestes à partir de vidéos produites par des capteurs de profondeur. A travers une modélisation géométrique, une séquence d0action est représentée par un système dynamique dont la matrice d0observabilité est caractérisée par un élément de la variété de Grassmann. Par conséquent, la reconnaissance d0actions est reformulée en un problème de classification de points sur cette variété. Ensuite, un nouvel algo- rithme d0apprentissage basé sur la notion d0espaces tangents est proposé afin d0améliorer le système de reconnaissance. Les résultats de notre approche, testés sur plusieurs bases de données, donnent des taux de reconnaissance de haute précision et de faible latence.
Fichier principal
Vignette du fichier
RimSlamaThesis2014.pdf (18.69 Mo) Télécharger le fichier
Loading...

Dates et versions

tel-01094740 , version 1 (18-12-2014)

Licence

Paternité

Identifiants

  • HAL Id : tel-01094740 , version 1

Citer

Rim Slama. Geometric Approaches for 3D Human Motion Analysis: Application to Action Recognition and Retrieval. Computer Vision and Pattern Recognition [cs.CV]. Université Lille 1 - Sciences et Technologies, 2014. English. ⟨NNT : ⟩. ⟨tel-01094740⟩
359 Consultations
502 Téléchargements

Partager

Gmail Facebook X LinkedIn More