Dans le concert VR de pointe d’Imogen Heap

Dans le premier épisode de L’avenir de la musique, J’ai assisté à un concert d’Imogen Heap … en mettant un casque de réalité virtuelle Oculus. Ce concert, qui se déroule dans un modèle VR de sa maison d’enfance, est une collaboration entre Heap et la société basée à Los Angeles TheWaveVR. Pendant que Heap chante, je me promène, salue, parle et me lie d’amitié avec d’autres personnes dans la pièce qui sont représentées par de jolis avatars d’animaux comme un renard ou un lapin. Le coup de pouce à tout cela: je ne regarde pas Imogen Heap jouer mais une version hologramme 3D d’elle.

Voir votre artiste préféré en personne est l’un des meilleurs sentiments au monde, mais les concerts de réalité virtuelle deviennent rapidement une alternative viable. Au cours des dernières années, des artistes comme Ariana Grande et Snoop Dogg ont expérimenté des versions enregistrées de leurs performances qui peuvent être visualisées dans les casques VR. Viacom a travaillé avec Billy Corgan pour créer une vidéo VR biométrique pour sa chanson, « Aéronaute. » Live Nation a même une division entière pour les concerts VR appelée NextVRet Oculus Venues a récemment accueilli sa première concert VR en direct avec Vance Joy comportant une composante sociale limitée.

Cependant, toutes ces expériences donnent l’impression d’essayer de reproduire des concerts réels, et non de les réinventer, ce qui rend difficile la justification Pourquoi quelqu’un devrait choisir de regarder un concert en réalité virtuelle plutôt que d’aller dans la vraie vie. Mais, TheWaveVR pense qu’il a déchiffré le code. Au lieu de rejouer des images de concerts dans des casques VR, il collabore avec des artistes pour créer des mondes VR psychédéliques personnalisés où les utilisateurs peuvent interagir les uns avec les autres lors du même spectacle.

Il s’agit de l’approche à deux volets TheWaveVR pense que les concerts VR ont besoin pour en faire une catégorie différente: des visuels que vous ne pouvez pas obtenir lors d’un vrai spectacle et une véritable expérience sociale. Une grande partie de ce qui rend les concerts si amusants et mémorables, c’est que vous pouvez les partager avec d’autres personnes et vous faire de nouveaux amis. À l’heure actuelle, la plupart des concerts VR ne sont rien de plus que des vidéos réelles agrandies que vous regardez par vous-même sur un équipement coûteux auquel la plupart des gens n’ont pas encore accès.

Je connais TheWaveVR depuis un certain temps et j’ai rencontré pour la première fois le PDG et co-fondateur Adam Arrigo en VR l’année dernière dans le cadre d’une expérience que la société a créée pour l’artiste électronique TOKiMONSTA. Petits lapins brillants, Adam et moi nous sommes téléportés autour de la planète virtuelle qu’il avait créée pour l’album de TOKiMONSTA Lune Rouge. Ensemble, nous avons joué avec un arbre à l’aspect extraterrestre qui nous a permis de remixer une de ses chansons en ramassant des orbes lumineux. Ce sens du jeu, l’interaction avec la musique et le fait d’être avec Adam dans l’espace VR ont piqué mon intérêt, et je voulais en savoir plus.

Voici comment cela fonctionne: TheWaveVR accueille des événements en direct tout le temps, à la fois avec des artistes établis et avec des membres de la communauté qui peuvent planifier leurs propres spectacles. Ils ont un ensemble de graphiques par défaut, mais avec son outil Wave Builder, tout le monde peut créer ses propres salles de réalité virtuelle, fêtes et modules complémentaires flashy. Les DJ qui se produisent lors de ces événements en direct contrôlent la musique ainsi que l’ensemble du lieu. Il peut être changé d’une boîte de nuit à l’espace, par exemple, ou des visuels en mouvement peuvent être déclenchés – comme des rubans scintillants au néon de lumière tirant au-dessus. Pendant ce temps, en tant qu’utilisateur, vous êtes libre de vous promener, d’approcher et de parler à d’autres utilisateurs, et de vous téléporter d’une fête à l’autre. C’est essentiellement une rave de rêve depuis votre salon.

Alors que la plateforme principale est ouverte à tous, TheWaveVR s’associe également avec des artistes pour des projets VR sur mesure. Il y a le monde TOKiMONSTA susmentionné et un autre spectacle mettant en vedette l’artiste iranien Ash Koosha, qui n’a pas pu venir aux États-Unis en raison de l’interdiction de voyager de Trump. «Nous l’avons laissé présenter son spectacle pour la première fois à un public américain qui a été exposé à ce type d’art totalement différent, à la fois musical et visuel», me dit Arrigo. « Nous pensons que cela peut fermer les frontières, et c’est ce qui est vraiment excitant. » Ces artistes se produisent en direct dans l’espace VR. Ce n’est pas le cas du rendu 3D élaboré de Heap. Mais TheWaveVR espère pouvoir exécuter des performances «hologrammes» entièrement en direct à l’avenir.

La plus récente collaboration de TheWaveVR, que j’ai pu voir pendant le processus de construction, est avec l’artiste musical, producteur et ingénieur du son primé aux Grammy Awards Imogen Heap. (Vous connaissez peut-être certaines de ses chansons à succès comme « Cache-cache » et « Allons y. ») Heap a toujours eu un intérêt pour la technologie. Au fil des ans, elle a dirigé des projets comme Mi.mu, ses gants équipés de capteurs pour jouer de la musique, et Mycelia, un projet de blockchain pour les musiciens. Maintenant, elle s’attaque à la réalité virtuelle. «La vraie magie est venue lorsque j’interagissais avec Adam», me dit Heap. «J’ai réalisé que je me sentais tellement plus proche et plus connecté, que ce n’était pas cet espace magique lointain. C’était cette véritable interaction humaine. »

Connecté au concert de Heap est une expérience à couper le souffle. Ce n’est pas aussi sauvage et surnaturel que certaines expériences de réalité virtuelle que j’ai eues dans le passé. C’est intime par conception. Je suis dans son salon – ou plutôt, des morceaux de son salon – tandis que l’image de Heap semble être juste devant moi, comme si je pouvais tendre la main et la toucher. Alors qu’elle chante, les murs autour de son éclat se séparent, et son corps commence à se dissoudre tandis qu’elle se balance d’avant en arrière. « Ce spectacle, contrairement à nos autres, est tout sur l’hologramme et la connexion du public avec elle », me dit Arrigo. «La réalité virtuelle peut donc offrir ce niveau d’intimité sans précédent avec un artiste parce que vous pouvez être plus proche de lui. Vous pouvez découvrir la musique d’une manière nouvelle. « 

Pour TheWaveVR, ce projet est particulièrement spécial en raison de sa ressemblance dynamique et tridimensionnelle avec Heap. TheWaveVR s’est rendu au domicile de Heap à Londres et a enregistré un téraoctet d’informations lors de son 40e anniversaire, y compris des vidéos en profondeur, du son, des données de ses gants Mi.mu et d’autres sources. Ces vidéos de profondeur ont été capturées avec l’outil vidéo volumétrique Depthkit de Scatter et font partie intégrante de la création de l’effet hologramme. Depthkit enregistre une distance pour chaque pixel, ce qui permet d’enregistrer des informations 3D sur un objet via quelque chose comme un capteur Microsoft Kinect. Ceci est ensuite synchronisé avec une caméra vidéo réelle pour superposer une texture sur le dessus, et ta-da, il y a Heap en 3D qui chante « Let Go ».

Toutes ces données ne visent pas à créer une réplique fidèle de Heap. Au lieu de cela, TheWaveVR l’utilise pour manipuler l’image d’Imogen et ajouter des visuels aux performances que vous ne pouvez pas obtenir dans la vie réelle. Pendant qu’elle chante, elle pourrait se casser en un million de grains de poussière rougeoyante ou se dissoudre en orbes de lumière. La maison autour d’elle se transforme également: les murs crépitent et le sol brille chaudement comme des flaques de lave.

Malgré tous ces effets, Heap me dit qu’elle voulait garder l’expérience ancrée dans la réalité. « Je pense que vous n’avez pas besoin de surprendre les gens », explique Heap sur la façon dont elle a choisi de créer l’expérience. «Je pense que cela peut se produire dans l’espace VR, où vous êtes bombardé par toutes ces nouvelles choses qui frappent vos sens tout le temps, et c’est en fait assez épuisant et un peu criard. Je pense que j’apprécie vraiment comment tout rapprocher. « 

La VR a parcouru un long chemin au cours des dernières années, mais même si les expériences de VR sont plus courantes, elles sont loin d’être courantes. Il est cher, peut être encombrant et nécessite un casque filaire haut de gamme pour une expérience vraiment immersive. De nombreux créateurs de RV ont souligné qu’ils faisaient un pari à long terme. PDG d’Harmonix Steve Janiak, dont le studio est derrière des expériences comme Rock Band VR et Harmonix Music VR, Raconté Moyens I/O l’année dernière, cette adoption généralisée pourrait être dans des années. « Mais c’est une technologie si transformatrice, et les types d’expériences que vous pouvez offrir sont si uniques en VR que j’ai du mal à penser que cela ne finira pas par se faire », a-t-il déclaré.

Les concerts virtuels ne peuvent pas remplacer l’expérience de spectacle en direct – l’atmosphère, la sensation du bras de votre meilleur ami par-dessus votre épaule pendant que vous criez des paroles ensemble – mais cela peut fournir quelque chose de différent. Ce «quelque chose de différent» est ce que TheWaveVR veut définir comme VR devient plus accessible au grand public. Projeter une performance vidéo enregistrée dans un casque Oculus est bien, mais à bien des égards, c’est une limitation d’isolement. L’espace VR est un terrain de jeu ouvert, alors pourquoi ne pas le traiter comme tel? C’est l’avenir que TheWaveVR et des artistes comme Imogen Heap voient.

«Notre mission centrale consiste à analyser la puissance de la technologie VR et à en tirer parti pour créer une expérience visuelle, une expérience interactive, une expérience sociale que vous ne pourriez tout simplement pas vivre lors d’un vrai spectacle», explique Arrigo. «Nous pensons donc que l’avenir de la musique est probablement quelque chose qui combine tous ces éléments. Il ne s’agit pas seulement de savoir comment la musique est jouée ou distribuée d’une manière nouvelle, mais comment les gens socialisent autour d’elle [and] comment il est visualisé. «