Reconnaissance automatique des expressions faciales en présence d’occultations partielles du visage - TEL - Thèses en ligne Accéder directement au contenu
Thèse Année : 2021

Facial expression recognition under partial occlusions

Reconnaissance automatique des expressions faciales en présence d’occultations partielles du visage

Résumé

Automatic facial expression recognition is useful to create applications in various domains such as health, road safety or marketing where feedback on user state is relevant. Despite very good results in controlled settings (frontal face, no occlusion, good illumination), facial expression recognition is still today challenging under unconstrained environment. Among the different challenges, occlusions are particularly difficult to handle as they add noisy elements on the images and hide parts of the information. Several solutions have been proposed to address this issue. These solutions can be roughly categorized in two : those which focus on visible regions of the face and those which try to reconstruct the hidden part. State-of-the-art solutions are mainly based on texture or, sometimes, geometry and few are based on movement. However, movement seems to be particularly adapted under occlusions thanks to different motion properties such as close range propagation and local coherency. In this manuscript, we show the interest of using movement to overcome the issue of occlusions for the task of facial expression recognition.
La reconnaissance automatique des expressions faciales peut s'avérer très utile pour diverses applications dans des domaines variés tels que la santé, la sécurité routière ou encore le marketing. Bien que des algorithmes permettent aujourd'hui une très bonne reconnaissance des expressions faciales dans un environnement contraint (pose frontale, pas d'occultation, bonne luminosité), la reconnaissance automatique des expressions faciales reste encore complexe dans un cadre naturel où l'on se retrouve confronté à certains défis. Parmi ces défis, les occultations rendent la tâche particulièrement difficile car elles ajoutent du bruit aux images et masquent une partie de l'information. Pour répondre à cette problématique, différentes solutions ont été proposées. Ces solutions peuvent être regroupées sous deux catégories : les solutions qui se concentrent sur les régions visibles du visage et celles qui reconstruisent les zones cachées. Les solutions de l'état de l'art sont principalement basées sur des éléments de texture, certaines solutions s'intéressent à la géométrie du visage mais très peu s'intéressent au mouvement. Or, le mouvement semble particulièrement adapté grâce à ses différentes propriétés : sa propagation et sa cohérence locale. Les travaux proposés dans ce manuscrit démontrent l'intérêt du mouvement pour reconnaître les expressions faciales en présence d'occultations partielles du visage.
Fichier principal
Vignette du fichier
These_POUX_Delphine.pdf (15.17 Mo) Télécharger le fichier
Origine : Version validée par le jury (STAR)

Dates et versions

tel-03613718 , version 1 (23-02-2022)
tel-03613718 , version 2 (18-03-2022)

Identifiants

  • HAL Id : tel-03613718 , version 2

Citer

Delphine Poux. Reconnaissance automatique des expressions faciales en présence d’occultations partielles du visage. Vision par ordinateur et reconnaissance de formes [cs.CV]. Université de Lille, 2021. Français. ⟨NNT : 2021LILUB023⟩. ⟨tel-03613718v2⟩
139 Consultations
162 Téléchargements

Partager

Gmail Facebook X LinkedIn More