Expressive Musical Performance Controlled by Vocal Gestures

Overview & Synopsis

L'objectif de ce projet est de permettre à des non musiciens d'interpréter une partition sur un instrument à vent virtuel, sans apprentissage instrumental. Inspiré du concept de MetaPiano, qui garantit la justesse des notes tout en laissant le contrôle des paramètres expressifs, le système transpose cette approche aux instruments à vent.Les utilisateurs produisent dans un microphone des gestes vocaux en combinant voyelles et consonnes. Ces gestes sont ensuite associés aux articulations musicales : une consonne suivie d'une voyelle déclenche une note détachée, tandis que deux voyelles consécutives produisent une note liée. L'intensité du souffle contrôle la dynamique, la vitesse de transition influence le rythme et la voyelle choisie module le timbre. Le signal audio est analysé en temps réel pour identifier les phonèmes et déclencher les notes d'une partition préalablement sélectionnée. Chaque nouveau geste vocal fait progresser la partition, ce qui garantit la justesse des notes tout en laissant à l'utilisateur la liberté de l'interprétation expressive. Cette approche permet ainsi de contrôler le rythme, l'articulation, la dynamique et le timbre, en offrant une interface à la fois accessible et expressive pour l'interprétation, sans nécessiter de maîtrise technique préalable.