YouTube expérimente la musique créée par l'IA dans certains tests

YouTube expérimente la musique créée par l'IA dans certains tests

Horodatage: 16 novembre 2023 7:47
YouTube expérimente la musique créée par l'IA dans certains tests PlatoBlockchain Data Intelligence. Recherche verticale. Aï.

YouTube expérimente un logiciel qui génère de la musique à l'aide d'un modèle d'IA appelé Lyria, construit par Google DeepMind.

Le géant de la vidéo domestique appartenant à Google a annoncé jeudi deux fonctionnalités qu'il propose à un petit groupe de testeurs : Dream Track et Music AI Tool. 

Dream Track convertit une invite textuelle en un court extrait audio qui imite la voix et le style de diverses pop stars, à savoir Alec Benjamin, Charlie Puth, Charli XCX, Demi Lovato, John Legend, Sia, T-Pain, Troye Sivan et Papouasie. Le choix des artistes est jusqu'à présent limité à ces interprètes car Google a dû négocier des licences pour former Lyria sur leur musique afin d'éviter une guerre des droits d'auteur.

Vous pouvez écouter ci-dessous ce que Dream Track génère pour l’invite « un matin ensoleillé en Floride, R&B » dans le style de T-Pain – un artiste bien connu pour modifier sa voix avec l’autoréglage. 

Youtube Video

Cela ressemble certainement à T-Pain, et les paroles sont appropriées et correspondent également à l'invite. Dream Track n'est actuellement disponible que pour « un ensemble limité de créateurs » qui peuvent générer des clips de 30 secondes de pistes créées par l'IA qui peuvent être publiées sous forme de courts métrages YouTube – généralement des vidéos d'une minute. 

Music AI Tool semble plus intéressant et utile. Il permet aux gens, en particulier à ceux qui ne disposent pas d'un ou plusieurs instruments, de transformer un clip audio – comme un accord ou quelqu'un fredonnant une mélodie – en quelque chose qui conserve le son original mais joué sous la forme d'un autre instrument. 

La démo la plus impressionnante, peut-être, convertit un tas de sons de chant « na-na-na » en une partition orchestrale, complétée par des instruments à cordes qui semblent pouvoir être une bande originale quelque peu convaincante pour un film. Vous pouvez l’entendre ci-dessous.

Youtube Video

YouTube ne partage Music AI Tool qu’avec certains artistes, auteurs-compositeurs et producteurs qui font actuellement partie de son programme Music AI Incubator. 

Music AI Tool permet aux gens de créer de la musique sous de nouvelles formes sans avoir à savoir chanter ou jouer particulièrement bien d’un instrument de musique – un peu comme n’importe qui peut utiliser des modèles de synthèse texte-image pour générer des œuvres d’art sans avoir à savoir dessiner ou peindre.

Cela nous rappelle un peu l’époque de l’essor de la musique électronique, lorsque les cyniques se plaignaient du fait que les synthétiseurs et le séquençage assisté par ordinateur permettaient à n’importe qui de produire des morceaux comme de soi-disant vrais musiciens.

« Ces expériences explorent le potentiel des fonctionnalités de l’IA pour aider les artistes et les créateurs à développer leur imagination et à augmenter leurs processus créatifs. » expliqué Lyor Cohen et Toni Reid de YouTube, respectivement responsable mondial de la musique et vice-président des expériences émergentes et des produits communautaires.

« Et à leur tour, les fans pourront se connecter aux créatifs qu’ils aiment de nouvelles manières, les rapprochant grâce à des outils et des expériences interactifs. Tout cela nous aidera à itérer et à améliorer la technologie, éclairant ainsi les applications du futur.

L’IA générative et la musique sont cependant particulièrement délicates. Non seulement il est difficile de créer des modèles capables de créer un son qui sonne vraiment bien, mais il est également difficile de sécuriser les données nécessaires à la formation des systèmes. Les maisons de disques sont notoirement procédurales lorsqu’il s’agit de protéger leurs droits d’auteur – comme YouTube le sait très bien. Le site de vidéo a déclaré qu'il travaillait sur ces problèmes et tentait de conclure des accords de licence pour rémunérer les artistes pour leur musique. 

« Malgré les formidables opportunités qu'offre l'IA, nous reconnaissons également qu'il s'agit d'un espace en évolution rapide qui présente des défis complexes. L'une des plus grandes forces de YouTube réside dans nos relations solides avec les partenaires de l'industrie musicale. Nous nous engageons à collaborer avec eux alors que nous entrons dans cette nouvelle ère, en explorant ensemble de manière critique de nouvelles opportunités et en développant des contrôles, des cadres de monétisation et d'attribution sensés et durables », ont ajouté Cohen et Reid.

Pendant ce temps, les chercheurs de Google DeepMind s'attaquent au problème des faux sons générés par l'IA qui pourraient être utilisés pour manipuler ou induire les auditeurs en erreur. Les pistes créées à l'aide de son modèle Lyria porteront des filigranes imperceptibles de son outil SynthID utilisé pour identifier le contenu synthétique. ID de synthétiseur fonctionne apparemment en convertissant les données audio en un spectrogramme bidimensionnel, en appliquant un filigrane numérique à cette représentation et en la reconvertissant en audio.

« Le filigrane est conçu pour maintenir la détectabilité même lorsque le contenu audio subit de nombreuses modifications courantes telles que l'ajout de bruit, la compression MP3 ou l'accélération et le ralentissement de la piste. SynthID peut également détecter la présence d'un filigrane tout au long d'une piste pour aider à déterminer si des parties d'une chanson ont été générées par Lyria », DeepMind expliqué. ®

Horodatage:

Plus de Le registre