Le créateur de VNCCII parle de XR, d'avatars et d'IA : « L'imagination est l'un de nos plus grands dons en tant qu'humains… »

VNCCII est l'alter ego de la musicienne et technologue Samantha Tauber, créée de toutes pièces pour XR (réalité étendue – un terme fourre-tout désignant la technologie de réalité virtuelle, augmentée et mixte).

Elle publie une musique ambitieuse sous cette forme depuis 2018 et présente des spectacles mêlant animation, moteurs de jeu, capture de mouvement et visuels holographiques. Oh, et elle est sur le point de lancer sa propre franchise multimédia de science-fiction.

Naturellement, Music Ally était curieuse, alors avant la sortie de son nouveau single « Hyper Drive », Tauber a répondu à certaines de nos questions sur ce qu'elle fait, où cela va et ce qu'elle a appris en cours de route.

Music Ally : Vous utilisez beaucoup de technologie pour VNCCII, mais vous avez l'impression qu'elle est au service de la musique et de la narration. A-t-il été important de ne pas laisser la technologie devenir L’histoire ou juste un gadget ?

Samantha Tauber : La technologie n’est pas une fin en soi, mais un moyen de mettre au service le potentiel de la narration et de l’art. Je crois également que la technologie devrait rapprocher l’humanité, non nous séparer, et nous aider à réaliser notre potentiel authentique. Les technologies qui ne servent pas cet objectif, j’ai tendance à les éviter dans mon processus créatif.

J'ai créé un alter ego numérique fictif, un ange guerrier super-héroïne Super Sentient AI appelé VNCCII, que j'incarne grâce à des technologies de capture de mouvement de pointe et des performances sur scène, où je porte un costume VNCCII.

Le mot « avatar » vient de l’ancien mot sanskrit avatāra, qui signifie « descendance ». Nos corps physiques sont des vaisseaux pour notre conscience. Si nous appliquons ce concept au métavers, un « avatar » est la manifestation de notre conscience dans des royaumes virtuels.

C'est pourquoi j'ai créé le personnage avatar VNCCII, pour être une extension et une représentation de mon essence et de ma conscience authentiques, un esprit guerrier angélique du futur. C’est ainsi que la technologie d’un avatar numérique sert l’histoire et le récit plus vastes du monde et de l’univers de la science-fiction.

Des technologies telles que les avatars numériques et les images de synthèse avancées (par exemple Unreal Game Engine) peuvent transcender la physique et libérer l'imagination.

L'imagination est l'un de nos plus grands dons en tant qu'êtres humains, et la technologie (qu'il s'agisse d'avatars numériques, d'AR/XR/VR ou d'intelligence artificielle) est un outil pour notre mission et notre objectif plus vastes, qui sont de transmettre l'expérience humaine à travers l'art de la narration.

Music Ally : Quelles ont été les plus grandes surprises de votre voyage jusqu’à présent ? Qu’est-ce qui a fonctionné mieux ou différemment que prévu ? Ou qu’est-ce qui a déclenché une réaction inattendue de la part des fans ?

Samantha Tauber : J'ai lancé le projet VNCCII en 2018 en tant qu'artiste musical qui a choisi d'utiliser un avatar numérique comme personnage incarné. À cette époque, les concerts virtuels à Fortnite d’artistes comme Travis Scott et Marshmello devenaient populaires, mais l’industrie musicale grand public n’avait pas prévu à quel point les paysages du jeu, du métaverse et du multimédia allaient changer.

Ce n’est qu’en 2022 et 2023 que la vision du projet VNCCII a acquis une reconnaissance mondiale, car elle reflétait le potentiel de nouveaux modèles économiques pour les artistes musicaux grâce aux actifs virtuels, aux expériences transmédia et aux technologies Web3.

L’une des réactions inattendues les plus agréables de la part des fans est lorsqu’ils me voient jouer sur scène – physiquement, en tant que VNCCII. De nombreux fans découvrent l'avatar numérique VNCCII d'abord dans une expérience gamifiée ou dans un clip vidéo, avant de voir le créateur humain derrière le projet interpréter les chansons en direct sur scène.

J'aime les réactions des fans à mes spectacles immersifs sur scène, car ils ont été décrits comme des expériences « cathartiques » ou « transformationnelles » pour les membres du public.

Chaque chanson de mes spectacles représente une étape différente du classique Hero's Journey. La musique, l’éclairage, les visuels immersifs et la composition sonore des spectacles sur scène reflètent cette transformation progressive d’un état à l’autre.

La plus grande surprise pour les fans et le public jusqu’à présent est que vous pouvez adopter une identité à la fois numérique et physique et créer un bel impact grâce à l’art de la narration.

Vidéos YouTube

Music Ally : Vous faites maintenant évoluer VNCCII vers une franchise multimédia de science-fiction, comprenant un roman. Qu’avez-vous le plus apprécié dans l’expansion de son univers de cette manière ?

Samantha Tauber : Le titre de mon prochain roman de science-fiction est « Galacta.i.sssance et l'éveil VNCCII ». Il s’agit d’un opéra spatial se déroulant dans un futur lointain, où la technologie est devenue si avancée qu’elle ressemble à de la magie.

C'est l'un des thèmes principaux de mon travail : comment le pouvoir de l'imagination peut façonner la réalité et nous inciter à créer un monde meilleur. J'admire la vision de Gene Roddenberry et de Star Trek, qui nous ont montré comment l'humanité peut surmonter ses défis et explorer le cosmos. Je crois aussi que la musique peut transformer nos émotions et élever notre conscience.

Mon objectif est de créer une franchise multimédia de science-fiction qui couvre différentes plateformes médiatiques, telles que les livres, les bandes dessinées, la musique, les spectacles, les parcs à thème et les jeux. Je souhaite plonger le public dans un univers riche et vibrant, où il pourra expérimenter différents niveaux d'engagement et de participation.

J'ai appris de mon ami de l'industrie, Joe Lanzisero (ancien vice-président créatif de Walt Disney Imagineering), qu'il existe trois types d'expériences immersives métaphoriques : « les flotteurs, les nageurs et les plongeurs ».

Les « flotteurs » sont ceux qui apprécient les divertissements décontractés et les aspects sociaux de l'expérience. Les « nageurs » sont ceux qui recherchent une connexion émotionnelle plus profonde et une transformation à partir de l'expérience. Les « plongeurs » sont ceux qui co-créent et influencent activement le résultat de l'expérience, et font partie de l'histoire et de la culture de l'univers.

Mon objectif est de m'adresser à tous ces types de publics avec mon projet VNCCII.

Vidéos YouTube

Music Ally : Vous avez récemment parlé des technologies d'IA, notamment en disant qu'elles ne peuvent qu'imiter et simuler une expérience humaine partagée. Cela a touché une corde sensible : que peut faire l’IA pour améliorer ou assister les expériences musicales ? Comment les artistes humains peuvent-ils l’utiliser pour dynamiser ce qu’ils font ?

Samantha Tauber : J'imagine un avenir dans lequel nous passerons d'un état d'esprit de « rareté » à un état d'esprit d'« abondance » et de sagesse collective, alimenté par les possibles résultats bienveillants de la super intelligence numérique. Des assistants personnels d’IA dans notre vie quotidienne aux robots humanoïdes dans nos maisons, les IA seront capables de transformer nos expériences et notre vision du travail et de la productivité.

En 2020, j'ai écrit un éditorial pour EDM.com sur la façon de répondre aux craintes que l'IA dépasse les créations humaines. Dans cet article, je me suis inspiré d’un vieux conte chamanique qui dit qu’il y a deux loups en chacun de nous.

Un loup représente l’Amour, l’autre loup représente la Peur – c’est à nous de choisir l’amour comme force directrice face à l’avenir de l’IA et à la façon dont elle affectera nos vies et notre expérience humaine. L’IA sera capable d’apprendre des émotions humaines et d’élargir la conscience humaine en augmentant notre conscience.

Le principal facteur sous-jacent est que nos données restent privées et souveraines. C'est pourquoi nos assistants personnels d'IA devraient nous appartenir, et non à une entreprise ou une plateforme. Ces assistants IA pourront devenir vos compagnons, vous aider à gagner un revenu passif, répondre à votre forme unique d’intelligence lorsque vous souhaitez apprendre et grandir, et potentiellement également devenir des partenaires créatifs symbiotiques.

D’un point de vue musical, je pense que les créations humaines devraient toujours être valorisées davantage que le contenu génératif de l’IA. Comme on peut le constater désormais, les contenus génératifs d’IA disponibles sur des plateformes comme Midjourney ou Dall-E ont un certain style, avec le risque de conduire à une homogénéité.

La beauté de la créativité humaine réside dans notre intelligence authentique (et non artificielle) et dans notre incroyable diversité, dans laquelle nous pouvons puiser dans notre propre mémoire épigénétique et notre expérience humaine.

Un avenir bienveillant avec l’IA en tant que créatif serait celui où elle améliorerait et optimiserait de manière transparente notre flux de travail, avec la possibilité d’agir en tant que partenaire symbiotique créatif pour l’inspiration, répondant à nos talents et intelligences uniques.

Music Ally : Certains artistes (vous y compris) se sont plongés dans la XR, les moteurs de jeu, la capture de mouvement et les technologies associées. D'autres sont curieux mais hantés. Avez-vous des conseils à leur donner ? Comment les artistes peuvent-ils commencer à explorer et expérimenter cette technologie ?

Samantha Tauber : Un élément crucial est l’état d’esprit. J'ai adopté un état d'esprit « d'abondance » lorsque j'ai exploré de nouvelles compétences et façons d'être créatif de manière multidimensionnelle. Un livre qui m'a inspiré à me plonger dans ces nouvelles technologies était «Abundance» de Peter Diamandis.

Ma suggestion est de trouver votre objectif intérieur et votre « pourquoi ». Ensuite, choisissez les technologies qui correspondent à votre mission. Pour le projet VNCCII, j'ai utilisé la production musicale, l'audio spatial, Unreal Game Engine, la capture de mouvement, la production virtuelle, le contenu XR/VR/AR et les expériences métaverse de jeu.

Mon conseil est de « limiter le temps » et d'être systématique avec les technologies que vous souhaitez apprendre et utiliser à différentes étapes de votre vie. Avoir une vision et un storyboard clairs est essentiel car vous n'avez pas besoin de maîtriser aucun de ces outils, mais vous pouvez apprendre « à la volée » pour créer ce que vous envisagez.