Introduction of high-dimensional interpretable machine learning models and their applications - TEL - Thèses en ligne
Thèse Année : 2019

Introduction of high-dimensional interpretable machine learning models and their applications

Introduction of high-dimensional interpretable machine learning models and their applications

Résumé

This dissertation focuses on the introduction of new interpretable machine learning methods in a high-dimensional setting. We developped first the C-mix, a mixture model of censored durations that automatically detects subgroups based on the risk that the event under study occurs early; then the binarsity penalty combining a weighted total variation penalty with a linear constraint per block, that applies on one-hot encoding of continuous features; and finally the binacox model that uses the binarsity penalty within a Cox model to automatically detect cut-points in the continuous features. For each me- thod, theoretical properties are established: algorithm convergence, non-asymptotic oracle inequalities, and comparison studies with state-of-the-art methods are carried out on both simulated and real data. All proposed methods give good results in terms of prediction performances, computing time, as well as interpretability abilities.
Dans ce manuscrit sont introduites de nouvelles méthodes interprétables de machine learning dans un contexte de grande dimension. Différentes procédures sont alors proposées: d’abord le C-mix, un modèle de mélange de durées qui détecte automatiquement des sous-groupes suivant le risque d’apparition rapide de l’événement temporel étudié; puis la pénalité binarsity, une combinaison entre variation totale pondérée et contrainte linéaire par bloc qui s’applique sur l’encodage “one-hot” de covariables continues ; et enfin la méthode binacox qui applique la pénalité précédente dans un modèle de Cox en tirant notamment parti de sa propriété de détection automatique de seuils dans les covariables continues. Pour chacune d’entre elles, les propriétés théoriques sont étudiées comme la convergence algorithmique ou l’établissement d’inégalités oracles non-asymptotiques, et une étude comparative avec l’état de l’art est menée sur des données simulées et réelles. Toutes les méthodes obtiennent de bons résultats prédictifs ainsi qu’en terme de complexité algorithmique, et chacune dispose d’atouts intéressants sur le plan de l’interprétabilité.
Fichier principal
Vignette du fichier
thesis_manuscript.pdf (9.1 Mo) Télécharger le fichier
Origine Fichiers produits par l'(les) auteur(s)
Loading...

Dates et versions

tel-02396796 , version 1 (06-12-2019)
tel-02396796 , version 2 (31-08-2020)

Identifiants

  • HAL Id : tel-02396796 , version 1

Citer

Simon Bussy. Introduction of high-dimensional interpretable machine learning models and their applications. Machine Learning [stat.ML]. SORBONNE UNIVERSITÉ, 2019. English. ⟨NNT : ⟩. ⟨tel-02396796v1⟩

Collections

UNIV-PARIS7
414 Consultations
348 Téléchargements

Partager

More