Espaces latents, vecteurs de révolution musicale

Philippe Esling

Note 2 : Yoshua Bengio, Aaron Courville et Pascal Vincent, « Representation Learning: A Review and New Perspectives », IEEE Transactions on Pattern Analysis and Machine Intelligence, vol. 35, n^o 8, août 2013, p. 1798-1828.
- On trouvera les outils open-source distribués gratuitement par ACIDS sur la force Github.
- Ces outils sont également distribués à travers le Forum IRCAM.
- Un cours gratuit open-source sur les modèles génératifs et l'intelligence artificielle créative créé par Philippe Esling.

Note 3 : Philippe Esling, Adrien Bitton et Axel Chemla-Romeu-Santos, « Generative Timbre Spaces with Variational Audio Synthesis », Proceedings of the 21st International Conference of the Digital Audio Effects (DaFX-18), Aveiro, Portugal, 4-8 septembre, 2018.
- Le code est disponible sur Git.
- On trouvera du matériel supplémentaire et des illustrations sonores ici.
- Ci-dessous le système Flowsynth, réalisé à partir de cet article pionnier dans l'utilisation des VAE en audio :
Note 4 : Antoine Caillon et Philippe Esling, « RAVE: A Variational Autoencoder for Fast and High-Quality Neural Audio Synthesis », novembre 2021.
- Les différents outils RAVE sont diffusés via le Forum Ircam.
- On trouvera ici quelques exemples sonores de transformation et de génération par un modèle RAVE.
- Voici une vidéo qui montre l'utilisation de RAVE sur des plateformes embarquées :
- L'utilisation de RAVE dans l'environnement Max est présentée en vidéo :
- La vidéo suivante illustre l'utilisation sur MaxMsp du modèle RAVE :
- Antoine Caillon nous présente sa thèse de doctorat :
- Le modèle AFTER étend les capacités de RAVE avec un meilleur contrôle et une séparation des caractéristiques timbrales et structurelles.
- La pièce The Call de Holly Herndon et Mat Dryhurst utilise extensivement AFTER pour la génération de chœurs :
- L'installation Nature's Manifesto de Björk et Aleph est également issue d'une collaboration avec ACIDS.

Note 5 : Voir Axel Chemla-Romeu-Santos et Philippe Esling, « Creative Divergent Synthesis with Generative Models », novembre 2022.
Les modèles utilisés dans l'article ci-dessus, outre ceux qui sont disponibles dans le package Torchvision, ont été entraînés à l'aide de ce code.
Note 6 : Le package Torchbend est accessible sur GitHub.
Note 7 : Le circuit bending est une opération visant à court-circuiter des instruments de musique électronique pour obtenir de nouveaux types de sons.