Jolene (Holly Herndon et Holly+) : utilise-t-elle de l'IA ?

Qui est Holly Herndon et qu’est-ce que Holly+ ?

Holly Herndon est une musicienne électronique expérimentale. En 2019, elle publie Proto, un album écrit avec une IA qu’elle a développée avec son partenaire Mat Dryhurst, rappelle The FADER. En juillet 2021, elle présente Holly+, son « jumeau numérique » : un instrument vocal, créé avec Never Before Heard Sounds, qui permet à n’importe qui de déposer un fichier audio et de le récupérer chanté avec sa voix, via un site gratuit.

La propriété intellectuelle de l’outil est confiée à une organisation autonome décentralisée, une forme de coopérative, et les revenus des licences de musique utilisant Holly+ doivent financer de nouveaux projets. « Les deepfakes vocaux sont là pour durer », écrit Herndon. « Il faut trouver un équilibre entre la protection des artistes et l’encouragement à expérimenter. C’est pourquoi nous menons cette expérience de propriété commune de la voix. »

Comment « Jolene » a-t-elle été produite ?

En 2022, Holly Herndon publie une reprise de « Jolene », le classique de Dolly Parton. L’arrangement, joué par Ryan Norris, reste assez fidèle : plus lent et plus doux, il remplace le désespoir de l’original par une résignation plaintive, décrit Engadget. Mais toutes les parties vocales sont générées par Holly+. « Chaque son vocal, jusqu’aux inspirations brusques avant les harmonies, a été généré par Holly+ », souligne Engadget. « Il n’y a pas un humain en vue dans une cabine d’enregistrement. »

Le résultat est jugé troublant de réalisme : quelques phrasés un peu raides et des artefacts numériques subsistent, mais l’ensemble reste très proche d’une voix humaine. Pour Engadget, c’est peut-être la première fois qu’un modèle d’apprentissage automatique « prend seul le micro » dans une chanson pop.

Pourquoi ce cas est-il différent ?

Contrairement aux imitations non autorisées de voix d’artistes, Holly+ est une démarche voulue et encadrée par l’artiste elle-même, qui réfléchit publiquement aux droits des artistes sur leur voix face à l’IA. Elle précède de près de deux ans l’initiative comparable de Grimes avec Elf.Tech. En 2024, Holly Herndon a d’ailleurs reçu à Berlin un prix consacré aux droits humains numériques.

Pourquoi le niveau « Vampirisé » ?

Toute la voix de la reprise est générée par IA, élément central d’une chanson, même si l’arrangement et la direction sont humains. C’est le niveau « Vampirisé ». Le statut « Confirmé » repose sur la présentation du projet par l’artiste et la presse.