Em abril de 2023, a diretora digital e vice-presidente executiva de desenvolvimento de negócios do Warner Music Group, Oana Ruxandra, disse ao The Hash da CoinDesk que espera que as ferramentas musicais impulsionadas pela inteligência artificial (IA) “abram o mundo como nunca fizemos antes”, inspirando “novas formas de criatividade e subgêneros” nas indústrias da música e do entretenimento.

Embora a perspectiva de Ruxandra seja optimista, ela também reconheceu as preocupações de muitos músicos: “Temos de estar muito vigilantes”, disse ela, salientando a importância de proteger a criatividade e os direitos dos artistas. Poucos dias antes da aparição de Ruxandra no The Hash, uma faixa musical falsa gerada por IA intitulada Heart On My Sleeve ganhou força ao imitar as vozes dos compositores Drake e The Weeknd – embora nenhum dos artistas tivesse participado de sua criação. Em vez disso, os criadores da música treinaram o bot de inteligência artificial usando músicas dos artistas, o que irritou o dono da gravadora Universal Music Group.

Outros músicos foram mais receptivos à nova tecnologia. Menos de uma semana depois, a musicista electropop Grimes convidou seus fãs a criarem suas próprias músicas dubladas por IA usando sua voz e estendeu a oferta para dividir os royalties em 50/50, demonstrando uma solução criativa para o enigma da IA ​​profunda e falsa.

Dividirei 50% dos royalties sobre qualquer música de sucesso gerada por IA que use minha voz. O mesmo acordo que eu faria com qualquer artista com quem colabore. Sinta-se à vontade para usar minha voz sem penalidade. Não tenho rótulo nem obrigações legais.

— 𝔊𝔯𝔦𝔪𝔢𝔰 (@Grimezsz)  24 de abril de 2023

Tendo em mente os desafios da propriedade intelectual, ainda não há dúvidas de que as ferramentas musicais de IA podem colocar novas formas de expressão ao alcance dos artistas. Às vezes, a IA pode até ser usada para melhorar a produção musical, preenchendo lacunas técnicas ou intelectuais nas habilidades de um artista, ajudando-o a dar vida a conceitos ambiciosos em questão de cliques. Essas ferramentas também podem realizar tarefas de engenharia de som com mais eficiência, reduzindo barreiras e reduzindo o tempo necessário para lançar música.

À medida que olhamos para a Web3, empresas e artistas estão a levar a IA ainda mais longe, combinando música com experiências imersivas, interativas e geradas pelo utilizador no metaverso e mais além.

Ferramentas musicais de IA em Web3

Vários músicos e plataformas cripto-nativos já encontraram maneiras criativas de integrar ferramentas de IA em sua prática.

Veja VNCCII, por exemplo, o primeiro alter ego do metaverso da produtora Samantha Tauber, de Sydney. Utilizando a ferramenta de criação 3D em tempo real líder do setor, Unreal Engine, Tauber veste seu avatar para transmitir entrevistas ao vivo do metaverso, além de se apresentar em concertos e shows virtuais. Como qualquer mudança de cenário ou figurino, o componente digital da identidade artística de VNCCII está expandindo as fronteiras de sua arte.

A empresa musical Web3 Pixelnyx combina experiências de realidade aumentada (AR) com jogos de metaverso e está focada em ajudar os artistas a criar experiências memoráveis ​​para os fãs. Co-fundado pelo produtor de música eletrônica Deadmau5, que é conhecido por enviar fãs em missões através do The Sandbox e hospedar shows em Decentraland, o PIXELYNX tem como objetivo evoluir nossas noções tradicionais de fandom através do uso de IA, Web3 e conteúdo gerado pelo usuário ( UGC).

Em abril, a Pixelnyx lançou o Korus, uma ferramenta que permite aos usuários criar companheiros musicais com tecnologia de IA usando conteúdo de artista oficialmente licenciado.

Conheça KORUS - companheiros musicais de IA e o futuro da música de nossa subsidiária @pixelynx_io 🎶🤖 Os companheiros KORUS AI revolucionarão a criação de #música, evoluindo e adaptando com base em suas escolhas, liberando a criatividade e permitindo que os criadores ganhem com a música de maneira divertida e interface fácil.

Saiba mais sobre o KORUS:

— Marcas Animoca (@animocabrands)  28 de abril de 2023

Quando usadas com este espírito, as ferramentas musicais de IA podem ajudar, aumentar ou aprimorar o estilo criativo de um artista. Embora as ferramentas ainda não sejam boas o suficiente para substituir os artistas, elas são impressionantes e estão constantemente “aprendendo” através da interação humana contínua. Substituir músicos por IA nunca foi uma abordagem popular, como comprovado pela resistência que o Spotify recebeu após testar sua própria versão de curadoria musical artificial. No entanto, apesar da controvérsia em torno da IA, os artistas musicais de hoje podem beneficiar da utilização da produção musical assistida por IA de formas que respeitem a arte.

Ideação e colaboração

WarpSound, uma plataforma musical adaptativa de IA, encontrou várias maneiras de integrar itens colecionáveis ​​​​e avatares digitais baseados em blockchain em suas ofertas de negócios. A empresa, que produz conteúdo musical, tokens não fungíveis (NFTs) e experiências sociais, lançará em breve uma API de software que compõe músicas originais nota por nota em diversos estilos.

O fundador e CEO Chris McGarry, empresário e executivo de mídia que anteriormente deixou o cargo de líder musical na unidade de realidade virtual do Facebook, Oculus, diz que as ferramentas da WarpSound ajudam os artistas a encontrar nova inspiração e material de origem que revigora seus processos criativos. A empresa recebe o Game Maker Fund do The Sandbox, que apoia designers de jogos no metaverso The Sandbox, e planeja construir um local dentro da plataforma onde os artistas possam experimentar música generativa.

Também lançou um AI Music Studio Artist Accelerator em parceria com o provedor global de pagamentos Mastercard, onde McGarry diz ter observado novos benefícios no processo criativo.

“Na semana passada, participei de uma série de sessões de estúdio virtuais com artistas participantes do programa”, disse McGarry. “Estávamos trabalhando com nossa interface musical generativa de IA para apresentar um conjunto de ideias musicais e, em seguida, fazer com que o artista as moldasse e iterasse até chegar a algo cuja essência ressoasse com eles, com o qual estivessem motivados a trabalhar.”

A WarpSound também fez parceria com o Tribeca Film Festival e o YouTube para criar experiências musicais interativas e lúdicas entre artistas e público.

Composição e arranjo

Se o seu projeto musical é menos sobre performance ao vivo e mais sobre o produto final - talvez você esteja compondo música original para um podcast, evento metaverso, canal do YouTube, videogame Web3 ou conteúdo educacional - você pode usar IA para acelerar o processo de composição e arranjo. É claro que os virtuosos mais talentosos do mundo provavelmente conseguem fazer escalas musicais enquanto dormem, mas com tantos elementos na produção de som e vídeo, está se tornando uma prática padrão usar IA para inserir escalas rápidas, arpejos, execuções e harmonias em músicas originais.

Ferramentas como o Riffusion permitem que os usuários forneçam instruções de texto que são transformadas em música. Soundful é outra plataforma de IA que permite às pessoas gerar e baixar faixas isentas de royalties.

Se você quiser dar um passo adiante e adicionar letras, a popular ferramenta faz-tudo ChatGPT pode escrever uma música de dois versos com pré-refrão, refrão, ponte e final em pouco menos de 30 segundos com o mínimo de solicitação. Claro, as letras podem ser um pouco simplistas ou cafonas – mas não são algumas das melhores músicas?

Na maioria dos casos, as músicas geradas pela IA são reproduzíveis sem a necessidade de pagar taxas de licenciamento, uma vez que foram feitas por máquinas e, portanto, não estão protegidas pela lei de propriedade intelectual dos EUA. A maioria das plataformas, entretanto, cobra uma taxa de assinatura.

Esses sons podem então ser cunhados como NFTs e vendidos em mercados como o OpenSea. Plataformas como Royal.io também permitem que artistas participem do site e ofereçam suas músicas como NFTs fracionados que oferecem pagamentos de royalties aos fãs.

Leia mais: O que são NFTs musicais?

Os limites da produção musical de IA

Você já deve ter ouvido falar que as ferramentas musicais de IA ainda não são tão sofisticadas, especialmente quando comparadas aos mais recentes geradores de texto para imagem de IA (que já foram usados ​​para criar coleções inteiras de quadrinhos) e ao chatbot da Open AI, Chat GPT (que supostamente passou no exame da Ordem).

A produção de áudio, de fato, requer mais poder de computação do que textos estáticos e imagens e, portanto, está atrasada, de acordo com especialistas na área. Alexander Flores, chefe de tecnologia e estratégia da rede de pesquisa musical Water & Music, diz que a inovação tecnológica geralmente viaja dos formatos menos intensivos em dados para os mais ricos. No caso da IA, faz sentido porque os chatbots são talvez mais rápidos de desenvolver do que a renderização de áudio e vídeo da IA.

Em um tópico de discussão on-line, um usuário do Reddit apontou essas limitações, enfatizando que, embora um escritor possa revisar e editar os resultados de um chatbot de IA em segundos, leva vários minutos para ouvir uma música e, às vezes, até horas para editá-la. As máquinas também são mais lentas para aprender com os conjuntos de dados de IA, uma vez que os arquivos de áudio que as alimentam raramente têm descrições de texto abrangentes para ensinar à IA sobre os atributos do arquivo (gênero, andamento, tom, instrumentação, etc.). Enquanto isso, IAs baseadas em texto e imagem podem vasculhar rapidamente milhares de palavras e imagens.

“Quanto tempo leva para consumir o conteúdo é muito importante”, disse Flores. “Com uma música, você fica preso por três minutos. Você não pode acelerar porque então você não está experimentando a música real como ela foi escrita.”

Além disso, as imagens são estáticas, enquanto as músicas são mais dinâmicas: “O áudio tem dimensões muito mais elevadas”, disse Stefan Lattner, pesquisador-chefe do Sony CSL, um laboratório de tecnologia criativa, em um painel no primeiro Wavelengths Summit da Water & Music. “Enquanto as imagens têm um número fixo de pixels, no áudio você tem um número variável de segundos que deseja gerar.”

No entanto, a Water & Music considera a IA criativa a tecnologia mais disruptiva para o negócio da música desde o Napster, a aplicação de partilha de ficheiros peer-to-peer que tornou a distribuição de música virtualmente gratuita, bem como sem fronteiras e sem permissão – um conceito familiar aos cripto-nativos. .