Stage : Conception de scénarios temporels de spatialisation (lumière et son) générés à partir de tablatures

Ce stage s’adresse à des étudiants de Master 2 en acoustique, informatique, traitement du signal, ou ingénierie multimédia, motivés par les environnements immersifs et la conception d’expériences sensorielles innovantes.

• Durée : 5 mois.
• Encadrement et contacts : L. Bigo, P. Legrand, J. Larralde.

Contexte

La spatialisation sonore est au cœur des expériences immersives modernes, que ce soit dans les concerts, les installations artistiques ou les environnements de réalité virtuelle. L’objectif est de transcender l’écoute stéréophonique classique en exploitant des systèmes multicanaux pour déplacer des sources sonores dans un espace tridimensionnel. Associée à une synchronisation lumière-son, cette technologie ouvre des perspectives innovantes pour des expériences audio-visuelles immersives.

Objectif du stage

Ce stage propose de travailler sur la spatialisation d’un enregistrement multipiste / ou d'un concert live, afin de permettre une diffusion indépendante de chaque source sonore (instrument, voix, etc.) sur un système multicanaux. L’étudiant(e) développera une méthode pour assigner chaque instrument à une position spécifique dans l’espace, contrôlable dynamiquement, et assurera une synchronisation lumière-son où la trajectoire d’une couleur lumineuse correspond à celle de la source sonore associée.

Les principales étapes incluent :

1. Analyse et segmentation audio : Étudier les caractéristiques des pistes audios et des partitions / tablatures associées pour extraire des paramètres utiles à la spatialisation (e.g., intensité, dynamique, texture).
2. Spatialisation sonore : Adapter un algorithme de spatialisation pour un système multicanaux, avec prise en compte de la gestion des transitions entre positions.
3. Synchronisation lumière-son : Créer une solution technique permettant d’associer chaque piste à une couleur lumineuse et de synchroniser ses mouvements dans l’espace lumineux avec sa spatialisation sonore.
4. Prototypage et évaluation : Implémenter un prototype fonctionnel et réaliser des tests perceptifs pour évaluer l’effet immersif et l’impact sur l’expérience utilisateur.
5. Echanges avec des artistes 

Compétences recherchées

• Connaissances solides en informatique, traitement du signal audio et/ou acoustique.
• Maîtrise d’un langage de programmation adapté (Python, MATLAB, ou C++).
• Intérêt pour les systèmes interactifs (OSC, MIDI, ou DMX) et la programmation des contrôleurs de lumière.
• Capacité à travailler sur des systèmes multicanaux (logiciels type Max/MSP, Pure Data, Reaper ou équivalents).
• La pratique d'un instrument, en particulier de la guitare, serait un plus, même si ça n'est pas indispensable.

Résultats attendus

À l’issue du stage, le ou la stagiaire devra produire :

1. Un prototype fonctionnel démontrant la spatialisation conjointe audio-lumière.
2. Une documentation technique détaillée permettant de reproduire et d’optimiser le système développé.
3. (Optionnel) Une évaluation perceptive via une série de tests utilisateurs.

Environnement de travail

Le stage s’effectuera dans un environnement de recherche pluridisciplinaire, en collaboration avec des équipes spécialisées en acoustique, traitement du signal, informatique et design interactif. Des outils et équipements adaptés, incluant un système multicanaux et des dispositifs de contrôle lumière, seront mis à disposition.