test
Search publications, data, projects and authors

Thesis

French

ID: <

10670/1.li0ilb

>

Where these data come from
La Plateforme MSCI : vers un outil de création d'instruments virtuels à retour d'effort. Application à la création musicale

Abstract

La notion d'instrumentalité peut être définie comme la relation corporelle entre un humain et un objet physique, dit instrument. Ce corps à corps intime, qui adresse simultanément les différents canaux sensoriels d'action et de perceptions humaines, constitue un vecteur pour la connaissance enactive. Cette relation instrumentale joue notamment un rôle clé pour la richesse expressive des instruments musicaux.Dans le contexte informatique, un vaste champ de recherche concerne l'interaction sensorielle avec des entités virtuelles par le biais de capteurs et d'actionneurs, notamment l'interaction gestuelle avec les systèmes à retour d'effort. D'une part, les Réalités Virtuelles, historiquement centrées sur la visualisation, focalisent essentiellement l'interaction gestuelle sur des propriétés spatiales, souvent au détriment de qualités dynamiques. D'autre part, les Instruments Musicaux Numériques sont essentiellement centrés sur le contrôle interactif de processus de synthèse sonore numériques, basés sur le traitement de l'information. Ces deux scénarii synthétisent des phénomènes sensoriels destinés à différents canaux perceptifs selon une approche multimodale, l'objet virtuel étant décomposé en sous-parties, liées entre elles par des relations de contrôle.Il est néanmoins possible de concevoir des systèmes permettant l'interaction instrumentale avec un objet virtuel simulé, avec une cohérence énergétique bidirectionnelle totale, du geste au son et réciproquement. Il est alors nécessaire de regrouper (a) un formalisme de modélisation physique permettant la création d'objets virtuels intrinsèquement multisensoriels, possédant à la fois des propriétés visuelles, acoustiques et haptiques, (b) des systèmes à retour d'effort de grande performance dynamique et (c) des architectures de calcul spécialisées, permettant une boucle de simulation synchrone réactive à haute vitesse.Le travail de cette thèse consiste en l'extension et la convergence des concepts et techniques ci-dessus pour la mise en œuvre d'une plateforme de création musicale instrumentale, dite MSCI (modeleur-simulateur pour la création instrumentale), en proposant une répartition multifréquence du calcul de simulation des instruments virtuels sur une nouvelle architecture matérielle synchrone. Un environnement de modélisation permet de concevoir intégralement l'instrument virtuel sur des principes mécaniques et physiques et de configurer le couplage physique entre celui-ci et l'utilisateur du monde réel lors de la simulation à retour d'effort.Il adresse entre autre la question de la répartition de la chaine instrumentale en zones à caractère majoritairement non-vibrant, dont la dynamique est de l'ordre du geste sensori-moteur humain, et en zones vibrantes, productrices du son. Ces deux parties de l'instrument peuvent être simulées à des fréquences différentes, adaptées aux phénomènes physiques dont elles sont le siège. Dans le cadre d'un formalisme de simulation physique garantissant la cohérence énergétique des objets simulés, la séparation multifréquence est une problématique nouvelle qui nécessite d'être abordée avec précaution, pour des questions de respect du couplage physique ainsi que de stabilité numérique.Il s'agit, à notre connaissance, du premier environnement de création musicale par modélisation physique modulaire permettant la manipulation instrumentale d'instruments virtuels multisensoriels, respectant une cohérence énergétique entre homme et instrument, et permettant de jouir du potentiel créatif de la synthèse sonore tout en retrouvant l'intimité et la richesse de l'interaction gestuelle instrumentale. Au delà du cadre musical, ce travail pose les bases et les outils technologiques pour un véritable art multisensoriel, adressant conjointement la vision, l'oreille ainsi que le geste humain.

Your Feedback

Please give us your feedback and help us make GoTriple better.
Fill in our satisfaction questionnaire and tell us what you like about GoTriple!