Interaction modality and multimodality
Modalité d'interaction et multimodalité
Abstract
My research field is in the area of engineering for Human Computer Interaction. My contributions to the field therefore include ergonomic as well as software design (software architecture). My primary motivation is to develop ways for making novel interaction techniques more usable. I first developed a design space for multimodality. The considerations involved in this design space are not only based on technological capabilities but also on the psychological consequences of the design features on future users. With the results of this work in hand (modality definition and design space), I then examined two research avenues. In the first one, I focused on output multimodal user interfaces applied to visualization of large information spaces. In the second one, I concentrated on new interaction modalities based on the augmented reality paradigm. For each of these two avenues, new ergonomic properties, design rules and patterns, software architectural solutions and new interaction techniques such as the clickable reality and the augmented stroll have been developed.
Mes travaux sont résolument ancrés dans l'ingénierie de l'Interaction Homme-Machine. Ce faisant, les deux facettes, conception ergonomique et conception logicielle, sont apparentes dans mes contributions. Mon étude s'articule autour des termes de modalité d'interaction et de multimodalité. Je me suis appuyée sur des résultats généraux incluant la définition d'une modalité et d'un espace de composition de modalités et je les ai infléchis à deux axes de recherche, l'exploration visuelle d'espaces informationnels et la réalité augmentée. Pour chacun de ces axes, des propriétés ergonomiques, des règles et patrons de conception, des solutions architecturales et logicielles, ainsi que des techniques d'interaction comme la réalité cliquable et la ballade augmentée ont été conçus.
Loading...