Generation of audio-visual prosody for expressive virtual actors - TEL - Thèses en ligne Access content directly
Theses Year : 2015

Generation of audio-visual prosody for expressive virtual actors

Génération de la prosodie audio-visuelle pour les acteurs virtuels expressifs

Abstract

The work presented in this thesis addresses the problem of generating audio-visual expressive performances for virtual actors. A virtual actor is represented by a 3D talking head and an audio-visual performance refers to facial expressions, head movements, gaze direction and the speech signal.While an important amount of work has been dedicated to emotions, we explore here expressive verbal behaviors that signal mental states, i.e "how speakers feel about what they say". We explore the characteristics of these so-called dramatic attitudes and the way they are encoded with speaker-specific prosodic signatures i.e. mental state-specific patterns of trajectories of audio-visual prosodic parameters.
Le travail presenté dans cette thèse adresse le problème de génération des performances expressives audio-visuelles pour les acteurs virtuels. Un acteur virtuel est répresenté par une tête parlante en 3D et une performance audio-visuelle contient les expressions faciales, les mouvements de la tête, la direction du regard et le signal de parole.Si une importante partie de la littérature a été dediée aux émotions, nous explorons ici les comportements expressifs verbaux qui signalent les états mentaux, i.e. "ce que le locuteur sent par rapport à ce qu'il dit". Nous explorons les caractéristiques de ces attitudes dites dramatiques et la manière dont elles sont encodées par des signatures prosodiques spécifiques pour une personne i.e. des motifs spécifiques à l'état mental de trajectoires de paramètres prosodiques audio-visuels.
Fichier principal
Vignette du fichier
BARBULESCU_2015_archivage.pdf (31.37 Mo) Télécharger le fichier
Origin : Version validated by the jury (STAR)
Loading...

Dates and versions

tel-01241413 , version 1 (22-12-2015)
tel-01241413 , version 2 (10-06-2017)

Identifiers

  • HAL Id : tel-01241413 , version 2

Cite

Adela Barbulescu. Generation of audio-visual prosody for expressive virtual actors. Graphics [cs.GR]. Université Grenoble Alpes, 2015. English. ⟨NNT : 2015GREAM071⟩. ⟨tel-01241413v2⟩
992 View
679 Download

Share

Gmail Facebook X LinkedIn More