Unité mixte de recherche Ircam-cnrs

Interface du plug-in de traitement vocal et audio SuperVP Trax

4.8.5.3.2VoiceForger

Descriptif

VoiceForger est une bibliothèque pour la transformation de la voix avec une interface utilisateur de haut. VoiceForger est basée en grande partie sur les analyses et traitements de la bibliothèque SuperVP en utilisant directement l’interface C++ de SuperVP. Grâce à l’avancée récente de la modularité de la bibliothèque SuperVP, VoiceForger reste efficace et permet des transformations en temps réel même pour plusieurs analyses (F0, Voiced/Unvoiced, VUF) secondaires. Le développement de la version C++ de cette bibliothèque a commencé dans le projet Affectif Avatars. Sont prises en compte les transformations d’âge et de genre du locuteur. La liste des transformations ciblées contient les âges et genres, les types des voix (rugueuse, chuchotée, aspirée), les émotions (joyeuse, énervé) mais éventuellement aussi les personnalités. La plupart des fonctionnalités de la bibliothèque VoiceForger sont accessible notamment dans le plugin TRaX-Transformer (voir image) qui a été développé en collaboration avec la société FLUX.

Principales fonctions réalisées

La bibliothèque VoiceForger est stabilisée et nous avons travaillé notamment sur les problèmes rencontrés dans les différentes applications. Les changements concernent notamment l’amélioration de la manipulation de l’ambitus et une extension de l’API par une fonction restart qui réinitialise la chaine de calcul sans réallocation de mémoire.

4.8.5.3.3Logiciel AudioSculpt

Descriptif

AudioSculpt permet de « sculpter » littéralement un son de manière visuelle. Après une phase d’analyse, le son s’affiche sous la forme d’un sonagramme, et l’utilisateur peut dessiner les modifications qu’il veut lui appliquer. Les traitements principaux sont le filtrage, la synthèse croisée, la transposition, la dilatation et la compression temporelle, le débruitage.

Plusieurs types d’analyses montrent le contenu spectral d'un son, et l’utilisateur peut ensuite modifier le son par plusieurs méthodes ; dessiner des filtres, déplacer des régions du sonagramme en temps et fréquence, ou appliquer une des nombreuses transformations de haute qualité.
Applications : composition, design sonore, postproduction, cinéma, multimédia, acoustique, enseignement, analyse musicale, ethnomusicologie.
Fonctions principales

• 
  Affichage/édition: zoom interactif sur le signal tem­porel jusqu’au niveau de l’échantillon, sonagramme linéaire et logarithmique;
  
• 
  Analyse : LPC, True Envelope, fréquence fonda­mentale, suivi des partiels, estimation de voisement, différentes méthodes de segmentation automatique, formants, outils pour l’écoute de certaines parties du spectre avec affichage harmonique;
  
• 
  Annotation: texte, zones et notes MIDI peuvent être placées sur le sonagramme;
  
• 
  Traitement sonore: séquenceur de traitement per­mettant de grouper des pistes de différents traite­ments et d’écouter leurs effets en temps réel avant de générer le résultat;
  
• 
  Filtrage : des filtres très précis sont dessinés direc­tement sur le sonagramme, générés par des analyses spectrales ou définis par un fichier image. Fonction spéciale pour la séparation manuelle des sources sonores;
  
• 
  Compression/expansion: modification de la longueur du son sans changer sa hauteur ou son timbre et en préservant la qualité des attaques et transitoires;
  
• 
  Transposition: à l’aide d’un éditeur spécifique, l’uti­lisateur peut transposer le son sans modifier sa lon­gueur, en préservant les caractéristiques spectrales (par exemple le timbre de la voix);
  
• 
  Débruitage : soustraction spectrale avec interpola­tion des estimations de bruit;
  
• 
  Synthèse croisée : application des caractéristiques spectrales d’un son sur un autre afin de créer un hybride sonore ou une transition d’un son à l’autre;
  
• 
  Synthèse des partiels : création d’un nouveau son à partir des partiels trouvés par une des analyses et mixage avec le résiduel;
  
• 
  Collage : des régions sonores définies sur le plan temps fréquence peuvent être copiées et collées;
  
• 
  Écoute : les transformations peuvent être écoutées en temps réel. Le mode scrub permet de naviguer dans le son à vitesse quelconque.
  
• 
  Courbes Bpf: l’utilisateur peut dessiner directement des courbes sur le sonagramme ou la forme d’onde afin de piloter des traitements.