Installation audiovisuelle interactive et oeuvre logicielle, 2017


ÉchoSystème est une installation audiovisuelle interactive, réalisée en collaboration avec l’équipe pédagogique et les élèves de l’école de Jettingen (68). Cette œuvre fut conçue dans le cadre du dispositif Création En Cours, initié par le ministère de la Culture et de la Communication et le ministère de l’Éducation nationale, de l’Enseignement supérieur et de la Recherche, en coopération avec Médicis Clichy Montfermeil qui en assure le pilotage.

Deux versions de l’œuvre ont été développées. Une 1ere version, format installation, qui repose sur un dispositif intégrant une Kinect (périphérique de captation permettant de détecter la position, la forme de la silhouette et les mouvements des utilisateurs)2 haut-parleurs,  un vidéoprojecteur et un écran de projection. Et une version tactile et pérenne, installée sur le TBI (tableau blanc interactif de la classe), qui permet aux élèves de garder une trace de notre création et de la redécouvrir à chaque fois qu’ils le souhaiteront.


ÉchoSystème, version Kinect





ÉchoSystème, version Tableau Blanc Interactif



Je voulais vraiment placer les élèves au cœur du processus créatif : ainsi, ce sont eux qui ont dessiné tous les éléments visuels de l’œuvre (arrière-plans, papillons, fleurs, etc.), et toute la matière sonore que j’ai utilisée pour la composition de la trame musicale interactive provient également de l’école : enregistrements de bruits réalisés par les élèves à l’aide de leur bouche, de leur corps et d’objets, et enregistrement de petits instruments trouvés dans l’établissement.


Le système algorithmique que j’ai développé permet de donner vie aux différents éléments audiovisuels afin de générer un écosystème interactif : des arbres poussent au rythme de la musique, les papillons volent de manière autonome et viennent se poser sur les spect’acteurs immobiles, ces derniers laissant une trace de leur présence, des fleurs ayant poussé dans leur silhouette. En bougeant les bras, on fait apparaitre des trainées de fleurs, et lorsque l’on rapproche les mains, on fait apparaitre un mandala kaléidoscopique que l’on peut ensuite manipuler.



Pistes audio







EchoSystem

Dispositif audiovisuel interactif, 2016





Le Planétarium Musical Interactif est un dispositif numérique audiovisuel créé spécialement et simultanément pour l’Hôpital Necker Enfants Malades de Paris et le Johns Hopkins Children Center de Baltimore (USA).

Ce dispositif est constitué d’une installation audiovisuelle interactive pour écran TV, ordinateur et Kinect et d’une application tablette pour les enfants alités.

J’ai conçu et développé ce dispositif afin d’offrir aux enfants hospitalisés un espace d’expression créatif leur permettant de dessiner de la musique en bougeant les bras, la tête, le corps (installation Kinect) ou en tapotant et en glissant le(s) doigt(s) (application tablette).

Cette œuvre permet à toute personne, quels que soient son âge ou ses aptitudes psychomotrices de s’amuser, de s’exprimer et de se sentir valorisé au travers une expérience ludique. Ce dispositif motive également les enfants à bouger, les aides à oublier la douleur et favorise ainsi leur rééducation. Il offre également de nouveaux canaux de communication entre les thérapeutes, les patients et leur famille.

Mon but est d’aider les enfants à oublier les murs de l’hôpital, leur isolement, de les amener à se sentir connecter avec leur corps et avec le cosmos. Sur l’écran, leur silhouette est constituée de centaines d’étoiles et se recompose, se reconfigure à chaque instant, à l’instar de leur corps physique. En créant de magnifiques dessins et mélodies, ils reprennent confiance en eux, confiance en leurs aptitudes et par extension dans le processus thérapeutique.

L’installation propose plusieurs modalités d’expressions et de communication : interaction corporelle (la forme de la silhouette est reconstituée à l’écran par des centaines d’étoiles), interactions gestuelles (les mouvements des mains créés des lignes mélodiques et visuelles, et lorsque l’on rapproche les deux mains l’une de l’autre, une boule d’énergie que l’on peut manipuler est créée), interaction faciale (lorsque l’on ouvre la bouche, des chœurs d’enfants se font entendre, et des centaines d’étoiles sont émissent),  etc.

Les dessins réalisés sur les tablettes par les enfants alités s’affichent sur l’écran de l’installation. Ces dessins musicaux peuvent aussi être échangés entre les deux hôpitaux afin de créer une communication entre les enfants du Johns Hopkins Children Center de Baltimore et ceux de l’Hôpital Necker Enfants Malades à Paris.


Ce projet a été rendu possible grâce à l’association Art Dans La Cité et au généreux soutient de la fondation Stavros Niarchos et du Ministère de la Culture et de la Communication.













Schéma technique du dispositif : 











Interactive Musical Planetarium

Enso V2

Audio performance for augmented shakuachi, 2013

Live recording during my performance in La Gaité Lyrique (Paris, France) during Ircam Live event.








All the sounds heard during this performance are exclusively made from the notes I played and recorded live during the presentation. I built an usb controller and wrote an algorithm in order to loop, change the pitch, slice, transform and spacialize these notes in real-time in a 5.1 multi-channel environment.

During this performance, people are surrounded by sounds and can feel how the simplicity of a few simple notes can procreate the complexity of a very rich soundscape, how time and space are connected and how immaterial phenomena impact on their mind and body.

Programming, electronics and interpretation : Adrien Garcia





Enso studio version

Composition, 2011





Enso V1

Audio performance for augmented shakuachi, 2011








Enso