Etude de l'émergence de facultés d'apprentissage fiables et prédictibles d'actions réflexes, à partir de modèles paramétriques soumis à des contraintes internes. - TEL - Thèses en ligne Accéder directement au contenu
Thèse Année : 2002

Reliable and predictible behavior learning abilities as emerging properties of some parametrical systems which fulfil internal constraints.

Etude de l'émergence de facultés d'apprentissage fiables et prédictibles d'actions réflexes, à partir de modèles paramétriques soumis à des contraintes internes.

Frédéric Davesne

Résumé

The long term goal of our work is the settlement of reliable and predictable learning techniques} of basic behaviors in the robotics framework. This document is a starting point for this project.

As a first step, we argue that classical learning methods do not fulfill our request about reliability and predictibility. We think the key point of this issue is the way the communication between the learning system and its environment is modelled. We illustrate this point of view by giving a reinforcement learning example.

We introduce a formalized framework in which communication
is seen as an interaction, as in physics. Two kinds of forces are applied to the system: the reaction of the system is deduced, knowing the action of its environment and the fulfilment of a set of internal constraints. Learning ability becomes an emerging property of the system} which is the result of several reactions over time. All the possible evolutions of the system are deduced from the prior knowledge about the interaction (with no need of other parameters).

We apply our technique to a set of two interconnected sub-systems,
which global goal is to learn basic behaviors.

We prove that the first sub-system may possess as an emerging property (within some restrictive conditions) the abilities of reliable and predictable reinforcement learning and latent learning.

The second one is at a starting point. Its aim is to convert physical signals into what we call perceptive information. A selective process is involved in this task, in order to choose valid hypothesis about the evolution of the signal, from a set of hypothesis called memory. Internal constraints applied to the structure of the memory limit the valid sets of perceptive informations. In a simple case of memory, we show that these constraints lead to an equivalent of the Shannon's sampling theorem.
L'objectif à long terme de notre travail est la mise au points de techniques d'apprentissage fiables et prédictibles d'actions réflexes, dans le cadre de la robotique mobile. Ce document constitue un départ à ce projet.
Dans un premier temps, nous donnons des arguments défendant l'idée que les méthodes d'apprentissage classiques ne peuvent pas,
intrinsèquement, répondre à nos exigences de fiabilité et de prédictibilité. Nous pensons que la clé du problème se situe dans la manière dont la communication entre le système apprenant et son environnement est modélisée. Nous illustrons nos propos grâce à un exemple d'apprentissage par renforcement.

Nous présentons une démarche formalisée dans laquelle la communication est une interaction, au sens physique du terme. Le système y est soumis à deux forces: la réaction du système est due à la fois à l'action de l'environnement et au maintient de contraintes internes. L'apprentissage devient
une propriété émergente d'une suite de réactions du système, dans des cas d'interactions favorables. L'ensemble des évolutions possibles du système est déduit par le calcul, en se basant uniquement (sans autre paramètre) sur la connaissance de l'interaction.

Nous appliquons notre démarche à deux sous-systèmes interconnectés, dont l'objectif global est
l'apprentissage d'actions réflexes.

Nous prouvons que le premier possède comme propriété émergente des facultés d'apprentissage par renforcement et d'apprentissage latent fiables et prédictibles.

Le deuxième, qui est ébauché, transforme un signal en une information perceptive. Il fonctionne par sélection d'hypothèses d'évolution du signal au cours du temps à partir d'une mémoire. Des contraintes internes à la mémoire déterminent les ensembles valides d'informations perceptives.
Nous montrons, dans un cas simple, que ces contraintes mènent à un équivalent du théorème de Shannon sur l'échantillonnage.
Fichier principal
Vignette du fichier
these_davesne_15072002.pdf (2.79 Mo) Télécharger le fichier
show_19042002.ppt (562.5 Ko) Télécharger le fichier
Format : Autre

Dates et versions

tel-00375023 , version 1 (11-04-2009)

Identifiants

  • HAL Id : tel-00375023 , version 1

Citer

Frédéric Davesne. Etude de l'émergence de facultés d'apprentissage fiables et prédictibles d'actions réflexes, à partir de modèles paramétriques soumis à des contraintes internes.. Informatique [cs]. Université d'Evry-Val d'Essonne, 2002. Français. ⟨NNT : ⟩. ⟨tel-00375023⟩
155 Consultations
262 Téléchargements

Partager

Gmail Facebook X LinkedIn More