Construction, manipulation et visualisation de processus sonores dans des environnements virtuels immersifs pour la performance musicale
Résumé
The work presented in this thesis belongs to the computer music field as well as to the virtual reality field. First, we describe the advantages of immersive virtual environments and of 3D graphical interaction for multiprocess instruments and particularly for the hierarchical live-looping, a new instrument model that we define. We then suggest solutions to visualize and manipulate sound processes in these virtual environments. In order to display the sound processes, we introduce the 3D reactive widgets, which rely on audiovisual mappings that we study. We develop a novel 3D interaction device suitable for musical interaction, called Piivert, together with associated interaction techniques, among which the tunnels, in order to manipulate the 3D reactive widgets. Finally, we implement the hierarchical live-looping with an immersive instrument called Drile, using the previously developed techniques, and we study different stages for immersive musical performances.
Le travail présenté dans cette thèse s'inscrit à la fois dans le domaine de l'informatique musicale et dans celui de la réalité virtuelle. Nous présentons tout d'abord les avantages des environnements virtuels immersifs et de l'interaction graphique 3D pour les instruments multi-processus et en particulier pour le live-looping hiérarchique, un nouveau modèle d'instrument que nous définissons. Nous proposons ensuite des solutions pour la visualisation et la manipulation des processus sonores dans ces environnements virtuels. Afin de représenter les processus sonores, nous introduisons les widgets réactifs 3D qui s'appuient sur des mappings audiovisuels que nous évaluons. Nous développons un nouveau dispositif d'interaction 3D adapté à l'interaction musicale, appelé Piivert, ainsi que des techniques associées, dont les tunnels afin de manipuler les widgets réactifs 3D. Finalement, nous mettons en œuvre le live-looping hiérarchique avec l'instrument immersif Drile, en utilisant les techniques développées précédemment, et nous étudions plusieurs scènes pour les performances musicales immersives.
Loading...