On actions that matter : credit assignment and interpretability in reinforcement learning - TEL - Thèses en ligne Accéder directement au contenu
Thèse Année : 2022

On actions that matter : credit assignment and interpretability in reinforcement learning

De l'importance des actions : assignation de crédit et interprétabilité pour l'apprentissage par renforcement

Résumé

This thesis, written for the qualification of Doctor of Philosophy in Computer Science, studies the question of the individual importance of actions in sequential decision-making, through the lens of Reinforcement Learning, and with diverse applications.An important finding of this work is that two seemingly different open problems in Reinforcement Learning, namely the credit assignment problem and explainability, have partial solutions that involve similar tools that can all be viewed as the estimation of particular forms of action importance.Several algorithms that suit different forms of action importance are proposed and studied from a theoretical point of view, empirically, or both.
Cette thèse, écrite pour l'obtention du doctorat en Informatique, étudie la question de l'importance individuelle des actions dans la prise de décision séquentielle, via le prisme de l'Apprentissage par Renforcement, avec diverses applications.Une découverte importante de ce travail est que deux problèmes ouverts en apparence distincts en Apprentissage par Renforcement, à savoir le problème d'assignation de crédit et l'interprétabilité, ont des solutions partielles qui impliquent des outils communs qui peuvent être vus comme des estimations de formes particulières d'importance des actions.Des algorithmes qui correspondent à des formes distinctes d'importance des actions sont proposées et étudiées empiriquement, d'un point de vue plus théorique, ou les deux.
Fichier principal
Vignette du fichier
These_FERRET_Johan.pdf (28.9 Mo) Télécharger le fichier
Origine : Version validée par le jury (STAR)

Dates et versions

tel-03958482 , version 1 (26-01-2023)

Identifiants

  • HAL Id : tel-03958482 , version 1

Citer

Johan Ferret. On actions that matter : credit assignment and interpretability in reinforcement learning. Artificial Intelligence [cs.AI]. Université de Lille, 2022. English. ⟨NNT : 2022ULILB018⟩. ⟨tel-03958482⟩
136 Consultations
22 Téléchargements

Partager

Gmail Facebook X LinkedIn More