Comment l'IA transforme la création musicale sur le Web3

En avril 2023, Oana Ruxandra, directrice du numérique et vice-présidente exécutive du développement commercial de Warner Music Groupa déclaré à The Hash de CoinDesk qu'elle s'attend à ce que les outils musicaux pilotés par l'intelligence artificielle (IA) « ouvrent le monde comme T auparavant », inspirant « de nouvelles formes de créativité et de sous-genres » dans les industries de la musique et du divertissement.

Si Ruxandra est optimiste, elle reconnaît également les inquiétudes de nombreux musiciens : « Nous devons être très vigilants », a-t-elle déclaré, soulignant l'importance de protéger la créativité et les droits des artistes. Quelques jours avant son apparition dans l'émission The Hash, une vidéo générée par l'IA a été diffusée.deepfakemorceau de musique intituléLe cœur sur ma manchea gagné en popularité en imitant les voix des auteurs-compositeurs Drake et The Weeknd, même si aucun des deux artistes n'avait participé à sa création. Les créateurs de la chanson ont entraîné le robot d'intelligence artificielle.en utilisant la musique des artistes, ce qui a provoqué la colère du propriétaire du label Universal Music Group.

D'autres musiciens se sont montrés plus réceptifs à cette nouvelle Technologies. Moins d'une semaine plus tard, le musicien électropop Grimes invité ses fans à créer leurs propres chansons doublées par l'IA en utilisant sa voix et a étendu l'offre de partage des redevances 50/50, démontrant une solution créative à l'énigme du deep-fake de l'IA.

Conserver la propriété intellectuelledéfis à l'espritIl ne fait aucun doute que les outils musicaux basés sur l'IA permettent aux artistes de découvrir de nouvelles formes d'expression. Parfois, l'IA peut même améliorer la production musicale en comblant les lacunes techniques ou intellectuelles d'un artiste, l'aidant ainsi à concrétiser des concepts ambitieux en quelques clics. Ces outils permettent également d'optimiser les tâches d'ingénierie sonore, réduisant ainsi les obstacles et les délais de sortie.

Alors que nous nous tournons vers le Web3, les entreprises et les artistes poussent l’IA encore plus loin en associant la musique à des expériences immersives, interactives et générées par les utilisateurs dans le métavers et au-delà.

Outils musicaux IA dans Web3

Un certain nombre de musiciens et de plateformes crypto-natives ont déjà trouvé des moyens créatifs d’intégrer des outils d’IA dans leur pratique.

Prendre VNCCII, par exemple, l'alter ego de la productrice sydneyenne Samantha Tauber, qui incarne le métavers. Utilisant Unreal Engine, l'outil de création 3D en temps réel leader du secteur, Tauber revêt son avatar pour diffuser.interviews diffusées en directdu métavers, en plus de se produire lors de concerts et spectacles virtuels. Comme tout changement de décor ou de costume, la composante numérique de l'identité artistique de VNCCII repousse les frontières de son art.

Société de musique Web3PIXELNYX associe des expériences de réalité augmentée AR$3,9474 à des jeux de métavers et vise à aider les artistes à créer des expériences mémorables pour leurs fans. Cofondée par le producteur de musique électronique Deadmau5, connu pour ses talents d'envoi de fans quêtes à travers The Sandbox et organiser des spectacles à DecentralandPIXELNYX vise à faire évoluer nos notions traditionnelles de fandom grâce à l'utilisation de l'IA, du Web3 et du contenu généré par les utilisateurs (UGC).

En avril, PIXELNYX a publiéKorus, un outil qui permet aux utilisateurs de créer des compagnons musicaux alimentés par l'IA en utilisant du contenu d'artiste sous licence officielle.

Utilisés dans cet esprit, les outils musicaux d'IA peuvent accompagner, enrichir ou améliorer le style créatif d'un artiste. Bien que ces outils ne soient pas encore assez performants pour remplacer les artistes, ils sont impressionnants et apprennent constamment grâce à l'interaction Human continue. Remplacer les musiciens par l'IA n'a jamais été une idée populaire, comme en témoigne le refus opposé à Spotify après sa sortie. tester sa propre version de la curation musicale artificielle. Pourtant, malgré la controverse entourant l’IA, les artistes musicaux d’aujourd’hui peuvent bénéficier de l’utilisation de la production musicale assistée par l’IA d’une manière qui respecte le métier.

Idéation et collaboration

WarpSound, une plateforme musicale adaptative basée sur l'IA, a trouvé plusieurs moyens d'intégrer des objets de collection et des avatars numériques basés sur la blockchain à ses offres commerciales. L'entreprise, qui produit du contenu musical, des jetons non fongibles (NFT) et des expériences sociales, va bientôt lancer une API logicielle qui compose de la musique originale note par note dans une gamme de styles.

Fondateur et PDGChris McGarry, entrepreneur et dirigeant des médias, ancien responsable musical d'Oculus, filiale de réalité virtuelle de Facebook, affirme que les outils de WarpSound aident les artistes à trouver de nouvelles inspirations et des sources de ressources qui dynamisent leur processus créatif. L'entreprise est lauréate du prix « The Sandbox ».Fonds Maker de jeux, qui soutient les concepteurs de jeux dans The Sandbox , et prévoit de construire un lieu d'accueil à l'intérieur de la plate-forme où les artistes peuvent expérimenter la musique générative.

WarpSound a également travaillé avec Mastercard en tant que partenaire musical IA pour leurAccélérateur d'artistesprogramme, où McGarry dit avoir observé de nouveaux avantages pour le processus créatif.

« La semaine dernière, j'ai participé à une série de séances en studio virtuel avec des artistes participant au programme », a déclaré McGarry. « Nous avons utilisé notre interface musicale générative basée sur l'IA pour présenter un ensemble d'idées musicales, puis nous avons demandé aux artistes de les façonner et de les répéter jusqu'à ce qu'ils trouvent une idée dont l'essence résonne en eux et qui les motive à travailler. »

WarpSound s'est également associé au Tribeca Film Festival et à YouTube pour créer des expériences musicales interactives et ludiques entre les artistes et le public.

Composition et arrangement

Si votre projet musical est moins axé sur la performance live que sur le produit fini (par exemple, vous composez de la musique originale pour un podcast, un événement métaverse, une chaîne YouTube, un jeu vidéo Web3 ou du contenu éducatif), vous pouvez utiliser l'IA pour accélérer le processus de composition et d'arrangement. Bien sûr, les virtuoses les plus talentueux du monde peuvent probablement faire des gammes musicales dans leur sommeil, mais avec autant d'éléments dans la production sonore et vidéo, il est devenu courant d'utiliser l'IA pour insérer des gammes QUICK , des arpèges, des passages et des harmonies dans une musique originale.

Des outils commeRiffusionpermettre aux utilisateurs de fournir des invites textuelles qui sont transformées en musique.Sonoreest une autre plateforme d'IA qui permet aux utilisateurs de générer et de télécharger des pistes libres de droits.

Si vous souhaitez aller ONE loin et ajouter des paroles, l'outil polyvalent populaire ChatGPT Je peux écrire une chanson de deux couplets avec un pré-refrain, un refrain, un pont et une outro en un peu moins de 30 secondes avec un minimum d'aide. Bien sûr, les paroles peuvent être un peu simplistes ou ringardes, mais certaines des meilleures chansons ne le sont- T ?

Dans la plupart des cas, les chansons générées par l'IA sont reproductibles sans frais de licence, car elles ont été créées par des machines et ne sont donc pas protégées par la législation américaine sur la propriété intellectuelle. Cependant, la plupart des plateformes facturent un abonnement.

Ces sons peuvent ensuite être créés sous forme de NFT et vendus surdes marchés comme OpenSeaDes plateformes commeRoyal.iopermettent également aux artistes de rejoindre le site et de proposer leurs chansons sous forme de NFT fractionnés qui offrent des paiements de redevances aux fans.

Sur le même sujet : Que sont les NFT musicaux ?

Les limites de la production musicale par IA

Vous avez peut-être déjà entendu dire que les outils d'IA musicale ne sont T encore aussi sophistiqués, surtout si on les compare aux derniers générateurs de texte en image d'IA (qui ont déjà été utilisés pour créer des collections de bandes dessinées) et le chatbot d'Open AI, Chat GPT (qui auraitréussi l'examen du barreau).

La production AUDIO nécessite en effet plus de puissance de calcul que les sorties de texte et d'images statiques et est donc à la traîne, selon les experts du domaine. Alexandre Flores, responsable de la technologie et de la stratégie au sein du réseau de recherche musicale,Eau et musique, affirme que l'innovation technologique se déplace généralement des formats les moins gourmands en données vers les plus riches. Dans le cas de l'IA, il est logique que les chatbots soient peut-être plus rapides à développer que le rendu AUDIO et vidéo par IA.

Dans un fil de discussion en ligneUn utilisateur de Reddit a souligné ces limites, soulignant que si un écrivain peut relire et éditer les résultats d'un chatbot IA en quelques secondes, il faut plusieurs minutes pour écouter une chanson, et parfois même des heures pour la modifier. Les machines sont également plus lentes à Guides des ensembles de données IA, car les fichiers AUDIO qui les alimentent comportent rarement des descriptions textuelles complètes pour renseigner l'IA sur les attributs du fichier (genre, tempo, tonalité, instrumentation, ETC). De leur côté, les IA basées sur le texte et l'image peuvent rapidement parcourir des milliers de mots et d'éléments visuels.

« Le temps nécessaire pour consommer le contenu est très important », a déclaré Flores. « Avec une chanson, on est captivé pendant trois minutes. T' accélérer le rythme, car on ne vit pas la chanson telle qu'elle a été écrite. »

De plus, les images sont statiques, tandis que les chansons sont plus dynamiques : «AUDIO est tout simplement beaucoup plus dimensionnel », a déclaré Stefan Lattner, chercheur en chef chezSony CSL, un laboratoire de Technologies créative, lors d'un panel lors de la conférence inaugurale de Water & Music Sommet des longueurs d'onde« Alors que les images ont un nombre fixe de pixels, dans AUDIO, vous avez un nombre variable de secondes que vous souhaitez générer. »

Néanmoins, Water & Music considère l'IA créative comme la Technologies la plus disruptive pour l'industrie musicale depuis Napster, l'application de partage de fichiers peer-to-peer qui a rendu la distribution de musique pratiquement gratuite, sans frontières et sans autorisation – un concept familier aux crypto-natifs.