Auxiliary learning & Adversarial training for Medieval Manuscript Studies - TEL - Thèses en ligne
Thèse Année : 2024

Auxiliary learning & Adversarial training for Medieval Manuscript Studies

Auxiliary learning & Adversarial training pour les études des manuscrits médiévaux

Résumé

This thesis is at the intersection of musicology and artificial intelligence, aiming to leverage AI to help musicologists with repetitive work, such as object searching in the museum's manuscripts. We annotated four new datasets for medieval manuscript studies: AMIMO, AnnMusiconis, AnnVihuelas, and MMSD. In the second part, we improve object detectors' performances using Transfer learning techniques and Few Shot Object Detection.In the third part, we discuss a powerful approach to Domain Adaptation, which is auxiliary learning, where we train the model on the target task and an extra task that allows for better stabilization of the model and reduces over-fitting.Finally, we discuss self-supervised learning, which does not use extra meta-data by leveraging the adversarial learning approach, forcing the model to extract domain-independent features.
Cette thèse se situe à l'intersection de la musicologie et de l'intelligence artificielle, et vise à exploiter l'IA pour aider les musicologues dans leur travail répétitif, comme la recherche d'objets dans les manuscrits du musée. Nous avons annoté quatre nouveaux ensembles de données pour l'étude des manuscrits médiévaux : AMIMO, AnnMusiconis, AnnVihuelas et MMSD. Dans la deuxième partie, nous améliorons les performances des détecteurs d'objets en utilisant des techniques de Transfer learning et de Few Shot Object Detection.Dans la troisième partie, nous discutons d'une approche puissante de Domain Adaptation, qui est auxiliary learning, où nous formons le modèle sur la tâche cible et une tâche supplémentaire qui permet une meilleure stabilisation du modèle et réduit le over-fitting.Enfin, nous abordons l'apprentissage auto-supervisé, qui n'utilise pas de méta-données supplémentaires en tirant parti de l'approche de adversarial learning, forçant le modèle à extraire des caractéristiques indépendantes du domaine.
Fichier principal
Vignette du fichier
150231_BEKKOUCH_2024_archivage.pdf (6.97 Mo) Télécharger le fichier
Origine Version validée par le jury (STAR)

Dates et versions

tel-04555309 , version 1 (22-04-2024)

Identifiants

  • HAL Id : tel-04555309 , version 1

Citer

Imad Eddine Ibrahim Bekkouch. Auxiliary learning & Adversarial training for Medieval Manuscript Studies. Musicology and performing arts. Sorbonne Université, 2024. English. ⟨NNT : 2024SORUL014⟩. ⟨tel-04555309⟩
152 Consultations
63 Téléchargements

Partager

More