Bipolar de James Alliban présente un miroir audiovisuel qui génère un paysage sonore à partir de la présence et du mouvement de ses sujets. Les données audio résultantes (y compris celles du participant) sont utilisées pour transformer le corps en un portrait déformé qui fluctue entre les états de chaos et d’ordre. La vidéo capture également la fascination sans fin des sujets pour l’installation, offrant une gratification instantanée et une impression de possibilités infinies.
Comment avez-vous eu l'idée de cette vidéo?
Cette pièce a commencé comme une expérience. J'étais en train de parler lors d'un festival de design et on m'a demandé (avec les autres intervenants) de créer une courte vidéo «Merci d'être venu» à diffuser à la fin de l'événement. Je voulais faire quelque chose d'un peu plus intéressant que de parler simplement dans mon smartphone. À l’origine, j’avais l’intention de créer une application de suivi du visage qui déformait et glaçait mon visage en réponse à mon discours. Au fil du temps, j'ai transformé cela en une expérience corporelle à l'aide de la caméra Kinect.
Je suis tombé sur cet effet qui semblait si dramatique que j'ai décidé d'enquêter plus avant et de publier Bipolar (ainsi nommé en raison des fluctuations constantes entre les états de l'ordre et le chaos) sous la forme d'une courte vidéo. Les gens ont commencé à s'intéresser à la présentation de la pièce, je l'ai donc modifiée pour en faire une installation. Le projet est devenu un effort de collaboration lorsque Liam Paton de Silent Studios a ajouté un aspect sonore interactif. Depuis, il a été exposé à plusieurs événements et expositions.
Nous aimons geek, alors faites-nous plaisir, que regardons-nous ici?
L'effet de base n'est pas trop impliqué. J'utilise openFrameworks, une boîte à outils de programmation basée sur les arts C ++. Environ 30 fois par seconde, les données de profondeur et le flux vidéo d'une caméra Xbox Kinect sont combinés pour créer un modèle 3D des visiteurs. J'utilise les données sonores provenant du microphone pour extruder chaque deuxième point du modèle 3D. Les points sont extrudés dans la direction dans laquelle ils se trouvent afin de fournir une esthétique spatiale qui n’est pas vraiment possible avec les données d’une caméra standard.
Au-delà de cela, cela devient assez compliqué. Il se passe encore beaucoup de choses dans les coulisses. J'utilise la puissance de la carte graphique pour lisser le modèle 3D et calculer un tas de données qui accélèrent l'application et améliorent généralement l'aspect de la pièce. J'ai une interface utilisateur dans l'application avec environ 15 à 20 pages de boutons et de curseurs qui me permettent de peaufiner la pièce jusqu'à ce que je sois satisfait. En termes de son, la motion du participant est calculée et envoyée à un logiciel séparé construit dans Max / MSP par Liam. Il crée ensuite le paysage sonore tordu en fonction de la quantité d'activité et de plusieurs autres facteurs tels que l'emplacement et la proximité. Ce son est ensuite capté par le microphone avec tous les autres sons de l'environnement et visualisé sur le corps du sujet.
Quel a été l'aspect le plus satisfaisant, pour vous, de cette pièce en particulier?
Bien que le processus d'apprentissage, l'acte de découverte et la sérendipité aient été très agréables, la meilleure partie de ce projet a été le résultat final. Regarder les gens découvrir et interagir avec l'installation pour la première fois est une expérience merveilleuse, que j'apprécie pour chaque pièce que je propose au public. Être anonyme au fond de la salle et regarder les gens vivre une expérience inattendue pour laquelle j'ai travaillé dur est toujours très enrichissant.
Quelle est la dernière grande chose que vous avez lue, vue ou entendue?
Je suis allée récemment voir la nouvelle pièce de l'Université de Virginie, "Momentum", à la galerie Curve de Barbican. Il consiste en une série de 12 pendules à lumière mécanique qui oscillent uniformément dans l’espace sombre. L'effet était très contemplatif et, pour moi du moins, légèrement inquiétant à cause du comportement contre nature de ces projecteurs lents.
Et après?
Je parle à quelques conservateurs de l’exposition de Bipolar et, dans l’intervalle, je continue à explorer de nouvelles façons de représenter le corps par le biais de l’interactivité. Je travaille actuellement sur plusieurs projets, dont deux sont sur le point de tomber, alors restez à l’écoute.
