Experimentos do YouTube com música feita por IA em testes selecionados

Experimentos do YouTube com música feita por IA em testes selecionados

Experimentos do YouTube com música feita por IA em testes selecionados PlatoBlockchain Data Intelligence. Pesquisa vertical. Ai.

O YouTube está experimentando um software que gera música usando um modelo de IA chamado Lyria, desenvolvido pelo Google DeepMind.

A gigante do vídeo doméstico de propriedade do Google anunciou na quinta-feira dois recursos que está lançando para um pequeno grupo de testadores: Dream Track e Music AI Tool. 

Dream Track converte um prompt baseado em texto em um pequeno trecho de áudio que imita a voz e o estilo de várias estrelas pop – como Alec Benjamin, Charlie Puth, Charli XCX, Demi Lovato, John Legend, Sia, T-Pain, Troye Sivan e Papoose. A escolha do artista está limitada a esses artistas até agora porque o Google teve que negociar licenças para treinar Lyria em suas músicas para evitar uma guerra de direitos autorais.

Você pode ouvir o que Dream Track gera para o prompt “uma manhã ensolarada na Flórida, R&B” no estilo de T-Pain – um artista conhecido por alterar sua voz com autotune – abaixo. 

Youtube Video

Certamente soa como T-Pain, e as letras são apropriadas e combinam com a sugestão também. Atualmente, o Dream Track está disponível apenas para “um conjunto limitado de criadores” que podem gerar clipes de 30 segundos de faixas feitas por IA que podem ser postadas como curtas do YouTube – normalmente vídeos de um minuto. 

A Music AI Tool parece mais interessante e útil. Ele permite que pessoas, principalmente aquelas que não têm nenhum ou muitos instrumentos, transformem um clipe de áudio – como um acorde ou alguém cantarolando uma música – em algo que retém o som original, mas tocado na forma de outro instrumento. 

A demo mais impressionante, talvez, converte um monte de sons cantados “na-na-na” em uma partitura orquestral, completa com instrumentos de cordas que parecem ser uma trilha sonora um tanto convincente para um filme. Você pode ouvir abaixo.

Youtube Video

O YouTube está compartilhando a ferramenta Music AI apenas com artistas, compositores e produtores selecionados que fazem parte de seu programa Music AI Incubator no momento. 

A Music AI Tool permite que as pessoas criem música em novas formas sem precisar saber cantar ou tocar instrumentos musicais particularmente bem – da mesma forma que qualquer pessoa pode usar modelos de texto para imagem para gerar obras de arte sem precisar saber desenhar ou pintar.

Isso meio que nos lembra de anos atrás, na ascensão da música eletrônica, quando os cínicos reclamavam que os sintetizadores e o sequenciamento auxiliado por computador permitiam que qualquer um produzisse faixas como os chamados músicos reais.

“Esses experimentos exploram o potencial dos recursos de IA para ajudar artistas e criadores a ampliar sua imaginação e aumentar seus processos criativos”, explicado Lyor Cohen e Toni Reid do YouTube, chefe global de música e vice-presidente de experiências emergentes e produtos comunitários, respectivamente.

“E, por sua vez, os fãs poderão se conectar com os criativos que amam de novas maneiras, aproximando-os por meio de ferramentas e experiências interativas. Tudo isso nos ajudará a iterar e aprimorar a tecnologia, informando as aplicações para o futuro.”

A IA generativa e a música, no entanto, são particularmente complicadas. Não só é difícil construir modelos capazes de criar um áudio que realmente soe bem, mas também é difícil proteger os dados para treinar os sistemas. As gravadoras são notoriamente litigiosas quando se trata de proteger seus direitos autorais – como o YouTube sabe muito bem. O site de vídeos disse que está contornando essas questões e tentando firmar acordos de licenciamento para compensar os artistas por suas músicas. 

“Apesar da tremenda oportunidade que a IA apresenta, também reconhecemos que é um espaço em rápida evolução que apresenta desafios complexos. Um dos maiores pontos fortes do YouTube é o nosso forte relacionamento com parceiros da indústria musical. Estamos comprometidos em colaborar com eles à medida que entramos nesta nova era, explorando juntos de forma crítica novas oportunidades e desenvolvendo controles, monetização e estruturas de atribuição sensatas e sustentáveis”, acrescentaram Cohen e Reid.

Enquanto isso, pesquisadores do Google DeepMind estão enfrentando o problema do áudio falso gerado por IA que pode ser usado para manipular ou enganar os ouvintes. As faixas criadas usando o modelo Lyria terão marcas d'água imperceptíveis da ferramenta SynthID usada para identificar conteúdo sintético. SynthID aparentemente funciona convertendo dados de áudio em um espectrograma bidimensional, aplicando uma marca d'água digital a essa representação e convertendo-a novamente em áudio.

“A marca d'água foi projetada para manter a detectabilidade mesmo quando o conteúdo de áudio passa por muitas modificações comuns, como adição de ruído, compactação de MP3 ou aceleração e desaceleração da faixa. O SynthID também pode detectar a presença de uma marca d’água em uma faixa para ajudar a determinar se partes de uma música foram geradas pelo Lyria”, disse DeepMind. explicado. ®

Carimbo de hora:

Mais de O registro