Vérification automatique du locuteur robuste à l'usurpation de l'identité : Architecture, Explicabilité et Optimisation Conjointe - TEL - Thèses en ligne Accéder directement au contenu
Thèse Année : 2024

Vérification automatique du locuteur robuste à l'usurpation de l'identité : Architecture, Explicabilité et Optimisation Conjointe

Spoofing-robust Automatic Speaker Verification : Architecture, Explainability and Joint Optimisation

Wanying Ge

Résumé

This thesis explores Automatic Speaker Verification (ASV) systems and their vulnerabilities to spoofing attacks, highlighting the necessity for robust spoofing countermeasures (CMs). It introduces the application of Partially Connected Differentiable Architecture Search (PC-DARTS) for optimizing network architectures for voice anti-spoofing, demonstrating competitive performance and better generalization against unseen attacks. Further, it employs SHapley Additive exPlanations (SHAP) to analyse and visualise the impact of individual input features on detection performance, providing insights into system behaviour and attack characteristics. Lastly, it proposes an integrated spoofing-aware speaker verification system, emphasizing the benefits and challenges of joint optimization of ASV and CMs for enhanced detection capabilities and system robustness against spoofing attacks.
Cette thèse explore les systèmes de vérification automatique du locuteur (ASV) et leurs vulnérabilités aux attaques de spoofing, soulignant la nécessité de contre-mesures robustes contre le spoofing (CMs). Elle présente l'application de la recherche d'architecture différentiable partiellement connectée (PC-DARTS) pour optimiser les architectures de réseau pour la lutte contre l'usurpation de la voix, démontrant une performance compétitive et une meilleure généralisation contre les attaques non vues. En outre, il utilise SHapley Additive exPlanations (SHAP) pour analyser et visualiser l'impact des caractéristiques d'entrée individuelles sur les performances de détection, ce qui permet de mieux comprendre le comportement du système et les caractéristiques de l'attaque. Enfin, il propose un système intégré de vérification du locuteur sensible à l'usurpation, en soulignant les avantages et les défis de l'optimisation conjointe de l'ASV et des CM pour améliorer les capacités de détection et la robustesse du système contre les attaques d'usurpation.
Fichier principal
Vignette du fichier
147939_GE_2024_archivage.pdf (2.47 Mo) Télécharger le fichier
Origine Version validée par le jury (STAR)

Dates et versions

tel-04633370 , version 1 (03-07-2024)

Identifiants

  • HAL Id : tel-04633370 , version 1

Citer

Wanying Ge. Vérification automatique du locuteur robuste à l'usurpation de l'identité : Architecture, Explicabilité et Optimisation Conjointe. Signal and Image processing. Sorbonne Université, 2024. English. ⟨NNT : 2024SORUS071⟩. ⟨tel-04633370⟩
0 Consultations
0 Téléchargements

Partager

Gmail Mastodon Facebook X LinkedIn More