La musique électronique a un problème de performance, et cet artiste essaie de le résoudre

Lors des répétitions au SXSW le mois dernier, Chagall van den Berg a rencontré un problème inhabituel: son genou numérique a explosé dans la mauvaise direction. “Mon ami a ri et a dit:” Wow, c’est un problème qu’aucun artiste SXSW n’a jamais eu “, raconte van den Berg Moyens I/O.

van den Berg est un musicien qui joue avec des gants de suivi de mouvement et une combinaison intégrale recouverte de capteurs qui, pendant cette performance SXSW, contrôlent non seulement la projection d’un avatar numérique qui apparaît derrière elle, mais contrôlent également presque tous les instruments et effet dans la musique et sa voix. Alors qu’elle se déplace sur la scène, son avatar, flottant dans l’espace, se synchronise. Quand elle étend ses bras au-dessus de sa tête, des grains d’audio ralentissent et se brisent. Chaque mouvement des mains et du corps a une cause et un effet, créant un paysage de rêve imprégné de pop qui est fascinant à regarder.

Portant ces capteurs, van den Berg peut apporter des accords et des mélodies d’un coup de main, ou déformer la vidéo d’elle-même de manière bizarre en levant un bras. Parce que chaque mouvement peut créer des changements audio ou visuels, ses performances sont très physiques, mais d’une manière élégante et délibérée. «Je peux faire tous les mouvements et ressembler à un contrôleur de la circulation aérienne», explique van den Berg. «Ça marcherait, mais ce n’est pas très performant. Toutes les chansons que j’interprète ont des mouvements qui sont fonctionnels et aussi significatifs. »

van den Berg joue avec des gants de détection de mouvement en 2017. La représentation commence à 3 h 50.

Né à Amsterdam, en Hollande, van den Berg était obsédé par la musique et les ordinateurs depuis son plus jeune âge, mais les avait toujours considérés comme des choses distinctes. Elle jouait des instruments dans des groupes, était chanteuse / compositrice et travaillait traditionnellement avec d’autres producteurs pour créer des rythmes pour ses morceaux. Puis en 2011, elle entre pour la première fois dans un «vrai» studio. En regardant les producteurs jouer avec ses chansons pour faire des remixes, il a cliqué: “Je peux le faire.” Elle s’est enseignée la production musicale et peu de temps après, en 2012, a sorti son premier EP. «J’ai tout de suite remarqué combien de liberté et d’indépendance cela m’a procuré», explique van den Berg. «Je n’avais plus besoin que d’autres personnes produisent mes chansons. Mon expression musicale est devenue tellement plus directe parce que je pouvais simplement faire les sons que j’avais dans ma tête au lieu de les expliquer à un autre être humain. »

van den Berg avait résolu un problème pour elle-même, mais sortir de la musique en créait un autre: comment interpréterait-elle les chansons qu’elle avait faites? La nature de la plupart des pistes électroniques signifiait qu’elle avait deux options: se tenir derrière une table avec un tas de matériel et de boutons et de faders, ou jouer une piste d’accompagnement et chanter sur le dessus. Aucun des deux n’était acceptable pour elle. «J’ai eu ce choix», explique van den Berg. «Soit ça allait être réel et en direct, mais ennuyeux à regarder et éloigné du public, soit je jouerais un enregistrement et je pourrais danser sur scène. Danser et ne faire qu’un avec le public était beaucoup plus attrayant, mais le musicien en moi n’aimait vraiment pas l’idée de chanter sur un morceau. J’ai donc eu un dilemme. “

En relation :  Spire Studio est un studio d'enregistrement qui tient dans votre main

Ce dilemme rencontré par van den Berg est un problème rencontré par de nombreux artistes du bricolage et de l’électronique – comment intégrer le mouvement et l’expressivité lorsque vous jouez essentiellement debout à un bureau, en utilisant une interface que le public ne verra probablement jamais? Et puis le rendre intéressant? Des actes comme The Glitch Mob utilisent des kits de batterie électroniques et des surfaces Microsoft piratées incliné vers le public, tandis que plusieurs startups, comme Enhancia et Genki Instruments, misent sur des anneaux de contrôleur MIDI. la solution initiale de van den Berg était Mi.Mu, une paire de gants de suivi des mouvements créés par le musicien Imogen Heap. Chaque gant possède neuf capteurs et déclencheurs entièrement personnalisables. Presque n’importe quel mouvement peut être assigné à n’importe quel paramètre musical, vous pouvez donc, par exemple, baisser le bras pour ajouter de la réverbération ou pincer l’air pour ajouter du chorus à votre voix. van den Berg était tellement inspirée par les gants Mi.Mu qu’elle a écrit «Sappho Song» le jour où elle les a reçus.

C’était en 2014, et cela a lancé une quête pour van den Berg pour combler de manière fluide l’écart entre ses mouvements corporels sur scène et le contrôle des effets audio et visuels. Alors que les gants permettaient à van den Berg de contrôler l’audio et la vidéo avec ses mains, elle voulait en faire plus: comment pourrait-elle l’utiliser tout le corps au lieu de juste ses mains? L’itération sur laquelle elle travaille maintenant combine les gants avec une combinaison de capture de mouvement, le genre de chose généralement utilisé pour enregistrer les mouvements des gens pour des jeux vidéo ou des films. Pour l’instant, elle a une chanson programmée pour utiliser toute la technologie qu’elle porte, mais l’objectif est de se développer à terme pour une émission d’une heure. Ce n’est pas une tâche facile. En cours de route, elle a dû apprendre le C ++, trouver une entreprise pour prêter ses capteurs (elle ne possède pas le système, estimant le coût total à environ 12000 $) et expérimenter en permanence de nouvelles combinaisons de technologies existantes sur toutes les plateformes pour lier le tout ensemble.

Me suis trouvé un autre grand écran! Soundcheck à Stockholm pour #nextm —— Les visuels réagissent au mouvement de mes @ mi.mu.gloves. Conçu par @ eduardo.fitch & @mostlynoise

posté par Chagall le mardi 2 avril 2019

La configuration de van den Berg semble élégante et minimale sur scène à SXSW, mais il y a un réseau complexe de matériel et de logiciels nécessaires pour le faire fonctionner. Elle porte les gants Mi.Mu sur ses mains, puis enfile un body personnalisé avec 15 des Capteurs de suivi de mouvement 3D de Xsens enjambant ses bras, ses épaules, sa tête, son bassin, ses jambes et ses pieds. Sur le côté se trouvent trois ordinateurs – un ordinateur portable Mac exécutant trois applications pour contrôler la lecture et les effets audio, un Mac mini qui utilise l’outil de «codage créatif» openFrameworks pour gérer tous les visuels contrôlés par les gants Mi.Mu, et un ordinateur portable Windows qui exécute les capteurs de la combinaison et les connecte en temps réel au moteur de jeu Unity à l’aide de la plate-forme VR sans fil intégrale VRee. Il existe également du matériel supplémentaire, comme des microphones et une interface audio. Pour vous assurer qu’il n’y a pas de hoquet, l’émission fonctionne sur son propre réseau Wi-Fi, ce qui oblige les lieux à désactiver le Wi-Fi de leur maison ou à le déplacer sur une fréquence différente pour éviter les interférences. C’est beaucoup. Mais le résultat – une réalisation de cinq ans de travail pour connecter le corps, la voix, la musique et la vidéo en une seule chose réactive – est incroyablement excitant.

En relation :  Fonctionnement du vote électronique: avantages et inconvénients vs vote papier

L’ensemble du processus doit devenir beaucoup plus simple si d’autres musiciens électroniques vont l’adopter, dit van den Berg. “[My setup] ce n’est pas ainsi que nous allons changer le monde de la performance de la musique électronique parce que personne ne dépensera tout cet argent et ne se souciera pas non plus des adresses IP et des réseaux pendant la vérification du son », dit-elle. «Qui veut faire une tournée avec trois ordinateurs coûteux et mettre tout cela en place pendant un passage de 20 minutes à un festival? C’est fou.”

van den Berg n’est pas la seule artiste électronique à penser au lien entre son moi physique et la technologie – musicienne Laura Escudé utilise également des contrôleurs basés sur les mouvements et des visuels réactifs, par exemple – mais elle est l’une des plus ambitieuses. Et bien que chaque hack soit égoïste en ce qu’il la rapproche du spectacle qu’elle a dans sa tête, il y a finalement un objectif plus grand: van den Berg espère que son expérimentation incitera les autres à réfléchir à la façon dont leurs performances peuvent être plus immersives, et qu’elle peut le rendre plus facile pour les artistes qui veulent faire des choses similaires.

«Mon rêve est que je ne suis pas le seul au monde à faire des choses comme ça», explique van den Berg. “Cette performance de musique électronique devient plus humaine et plus expressive.” Cela signifie être le seul à gérer tous les maux de tête techniques, pour que les autres n’aient pas à le faire.

«Je suis une sorte de cobaye», dit-elle en riant. “Mais ça me va.”

van den Berg joue au SXSW. Crédit vidéo: New Dutch Wave.

Moyens Staff
Moyens I/O Staff vous a motivé, donner des conseils sur la technologie, le développement personnel, le style de vie et des stratégies qui vous aider.