Echo-aware signal processing for audio scene analysis - Archive ouverte HAL Access content directly
Theses Year : 2020

Echo-aware signal processing for audio scene analysis

Traitement du signal avec des echos acoustiques pour l’analyse des scènes audio

(1)
1
Diego Di Carlo
  • Function : Author
  • PersonId : 1036279

Abstract

Most of audio signal processing methods regard reverberation and in particular acoustic echoes as a nuisance. However, they convey important spatial and semantic information about sound sources and, based on this, recent echo-aware methods have been proposed. In this work, we focus on two directions. First, we study how to estimate acoustic echoes blindly from microphone recordings. Two approaches are proposed, one leveraging on continuous dictionaries, one using recent deep learning techniques. Then, we focus on extending existing methods in audio scene analysis to their echo-aware forms. The Multichannel NMF framework for audio source separation, the SRP-PHAT localization method, and the MVDR beamformer for speech enhancement are all extended to their echo-aware versions.
La plupart des méthodes de traitement du signal audio considèrent la réverbération et en particulier les échos acoustiques comme une nuisance. Cependant, ceux-ci transmettent des in formations spatiales et sémantiques importantes sur les sources sonores et des méthodes es sayant de les prendre en compte ont donc récemment émergé.. Dans ce travail, nous nous concentrons sur deux directions. Tout d’abord, nous étudions la manière d’estimer les échos acoustiques à l’aveugle à partir d’enregistrements microphoniques. Deux approches sont proposées, l’une s’appuyant sur le cadre des dictionnaires continus, l’autre sur des techniques récentes d’apprentissage profond. Ensuite, nous nous concentrons sur l’extension de méthodes existantes d’analyse de scènes audio à leurs formes sensibles à l’écho. Le cadre NMF multicanal pour la séparation de sources audio, la méthode de localisation SRP-PHAT et le formateur de voies MVDR pour l’amélioration de la parole sont tous étendus pour prendre en compte les échos. Ces applications montrent comment un simple modèle d’écho peut conduire à une amélioration des performances.
Fichier principal
Vignette du fichier
main.pdf (12.89 Mo) Télécharger le fichier
Origin : Files produced by the author(s)

Dates and versions

tel-03133271 , version 1 (05-02-2021)
tel-03133271 , version 2 (08-02-2021)

Identifiers

  • HAL Id : tel-03133271 , version 1

Cite

Diego Di Carlo. Echo-aware signal processing for audio scene analysis: The Call of Echo. Signal and Image processing. UNIVERSITÉ DE RENNES 1; INRIA - IRISA - PANAMA, 2020. English. ⟨NNT : ⟩. ⟨tel-03133271v1⟩
280 View
586 Download

Share

Gmail Facebook Twitter LinkedIn More