Atelier de recherche eNTERFACE’08 au LIMSI-CNRS

Capture et apprentissage de signaux physiologiques pour la reconnaissance d’émotions: application aux arts du spectacles et à la scénographie multimedia.

Nous construisons une machine qui fait correspondre des sons et des images aux émotions d’un interprète.

Les entrées sont des capteurs de respiration (température nasale, diamètre de la cage thoracique), les battements du coeur, l’image du visage, le son de la voix. Les sorties sont des générateurs sonores et vidéo qui réagissent en temps réel.

Les étapes intermédiaires de traitement de l’information sont le coeur de notre travail:
– extraction de caractéristiques dominantes
– reconnaissance d’états par réseau de neurones artificiels
– représentation et analyse du déroulement émotionnel

L’artiste imagine un monde émotionnel représenté selon 4 pôles. Après un apprentissage, la machine peut dire où se trouve l’interprète dans ce monde. Nous étudions la rétroaction des sons et des images qu’il perçoit sur son état émotionnel.
Interpretation of sensor data: can we relate it to emotions ? (.pdf)

Beckett sur France Culture

Incertitudes, pièce radiophonique de Nicolas Déflache (2000)

Sur la base de textes issus de Comment C’est, l’Innommable et Soubresauts de Samuel Beckett. Avec Arnaud Garnier (récitant), Maja Pavlovska (chant), Mathieu Fèvre (clarinette), Raphaël Godeau (guitare) et Stéphane Mondésir (percussions)

Quatre musiciens improvisateurs et un comédien errent dans un univers sonore dans lequel s’opposent la liberté de leur interprétation et le monde impérieux de Samuel Beckett. Elaborée dans l’esprit d’un atelier de création radiophonique, la pièce fait apparaître comme par intermittence les images déroutantes d’une détresse familière.
texte (.pdf)

Enregistrement diffusé sur France Culture en février 2000, dans l’émission « Tentative Première » (Jean Couturier). Durée 8’35