Page d'accueil du site

Coordonnées de l'école
Ecole nationale supérieure Louis-Lumière
La Cité du Cinéma - 20 rue Ampère
93200
Saint-Denis (France) / Tel : 01 84 67 00 01
Téléphone
01 86 67 00 01

PIC Synth : un agent génératif synesthésique en temps-réel. Synthèse concaténative en temps-réel à partir d'images fixes.

Date :
2017
Auteur :
Suzanne Hervouët
Directeur(s) de mémoire :
Thierry Coduys & Arshia Cont
Son
Résumé

Les processus de création mêlant image et son sont en pleine expansion depuis l’arrivée du numérique. Ce progrès technologique a permis le développement conjoint des formes de représentation de ces contenus audiovisuels, à différents niveaux sémantiques, soulevant par la même occasion de nombreux questionnements relatifs à l’intelligence humaine et artificielle. Ce mémoire de master propose d’observer les formes actuelles de représentation de l’image et du son, et de l’apprentissage automatique. De cette étude, nous retiendrons des pistes de réflexion utiles à la création d’un dispositif synesthésique, Pic-Synth. Nous nous appuierons sur ces observations pour explorer les potentialités de réalisation de cet agent.

 

Mots-clés : Descripteurs Multimédia / Représentations Sémantiques / Synthèse Concaténative / Extraction de Données Recherche d’Information Musicale / Apprentissage Automatique / Sonification /Synesthésie.

Abstract

The creative processes combining image and sound are in full expansion since the arrival of digital technologies. Recent progress in computer science has expan- ded the development of audiovisual representations at different semantic levels, raising many questions concerning human and artificial intelligence. This master’s thesis aims to observe current models of visual and sound represen- tation, as well as machine learning. From this analysis, we will examine a synesthetic approach to generative music, through the creation of the Pic-Synth device.

 

Keywords: Multimedia Descriptors / Semantic Representations / Concatenative Synthesis / Data Retrieval / Music Information Retrieval / Machine Learning / Sonification / Synesthesia.