Deepfakes a aidé Charli XCX à imiter les Spice Girls dans son dernier clip

Lorsque les lecteurs grand public ont pris connaissance pour la première fois des fin 2017, c’est grâce à une sous-culture effrayante qui a utilisé l’outil d’échange de visage pour insérer des célébrités dans la pornographie. Plus récemment, les experts craignaient que la même technologie d’intelligence artificielle ne surpasse les fausses nouvelles. Mais voici la preuve que les deepfakes pourraient également être utilisés pour le montage vidéo grand public: le dernier clip de Charli XCX utilise la technologie comme un effet spécial.

La vidéo «1999» est un cas d’utilisation parfait pour les deepfakes. Dans ce document, Charli et la chanteuse Troye Sivan rendent hommage à diverses pierres de touche des années 90, comme Steve Jobs, le clip de “Waterfalls” de TLC, Titanesque, le Nokia 3310, Les Sims, etc. À deux reprises, les créateurs de la vidéo ont utilisé les mêmes algorithmes de deepfakes de base pour coller les visages de Charli et Sivan sur des danseurs imitant les Spice Girls et les Backstreet Boys.

Ryan Staake, directeur de la vidéo et chef du studio de création Pomp & Clout, explique que la décision d’utiliser des deepfakes était à la fois artistique et pratique. Parler à Moyens I/O, Staake dit que l’équipe avait une fenêtre limitée pour tourner la vidéo, alors ils ont utilisé des deepfakes pour éviter d’avoir à habiller les deux chanteurs comme tous les membres du groupe.

“Lorsque vous commencez à penser à la complexité de les faire entrer et sortir de la garde-robe et du maquillage pour chacun de ces personnages, cela prendrait cinq fois plus de temps”, explique Staake. «Donc, d’une certaine manière, c’était une solution pragmatique. Mais ensuite, nous avons également commencé à jouer sur la bizarrerie et l’esthétique de celui-ci. C’est une de ces choses où une partie de l’excitation essaie juste de voir si cela fonctionne. Par exemple, pouvons-nous utiliser cet étrange faux outil porno de célébrité dans un clip vidéo légitime? »

Malgré sa réputation d’être un outil de pornographie, la technologie sous-jacente derrière les deepfakes fait partie d’un vaste domaine légitime d’étude en IA. Au cours des dernières années, divers algorithmes ont été conçus pour modifier et éditer des vidéos réalistes. Les chercheurs ont créé des outils qui peuvent modifier les expressions des gens et les transformer en marionnettes humaines. Le travail a également été utilisé dans des applications grand public.

Bien que des outils comme Photoshop et After Effects puissent obtenir des résultats similaires, les algorithmes d’apprentissage automatique sont souvent plus faciles à utiliser pour les amateurs – d’où la popularité de la technologie et les craintes des experts qu’elle soit utilisée pour la désinformation et les canulars.

En relation :  Justin Timberlake mène une conférence technique en 2028 dans la vidéo de Filthy

Staake dit que son équipe a utilisé les mêmes algorithmes de base qui ont été partagés pour la première fois sur Reddit, les peaufinant pour améliorer la résolution et éditer légèrement le métrage résultant pour correspondre aux teints. Comme d’habitude pour ce type de processus, les algorithmes nécessitent beaucoup de données sur le visage du sujet. Staake dit que cela signifiait obliger Charli XCX à “faire une gamme d’expressions étranges sur scène – ouvrir la bouche, cligner des yeux – pour créer une base solide pour les algorithmes.”

Le résultat est largement convaincant, et Staake dit que toutes les imperfections ne font qu’ajouter à l’effet. “J’aime un peu que c’est juste assez éteint pour dire” Qui diable est cette personne? “”

Cela semble être la première fois que ces algorithmes sont utilisés dans un clip vidéo, et peut-être la première fois qu’ils sont utilisés à des fins commerciales. Selon Staake, ce n’est qu’un début. Il dit que son équipe a utilisé des algorithmes d’apprentissage automatique dans d’autres clips (comme celui-ci, pour générer un effet de carte postale), et les deepfakes feront probablement partie de leur boîte à outils d’édition habituelle.

«Nous avons beaucoup joué avec lui en interne, apprenant à l’utiliser, là où cela fonctionne le mieux», dit-il. «Je pense que nous allons certainement voir plus de cela. C’est un outil absolument incroyable. ”

Moyens Staff
Moyens I/O Staff vous a motivé, donner des conseils sur la technologie, le développement personnel, le style de vie et des stratégies qui vous aider.