En abril de 2023, la directora digital y vicepresidenta ejecutiva de desarrollo empresarial de Warner Music Group, Oana Ruxandra, dijo a The Hash de CoinDesk que espera que las herramientas musicales impulsadas por inteligencia artificial (IA) "abran el mundo como nunca antes", inspirando “nuevas formas de creatividad y subgéneros” en las industrias de la música y el entretenimiento.

Si bien la perspectiva de Ruxandra es optimista, también reconoció las preocupaciones de muchos músicos: “Tenemos que estar muy atentos”, dijo, destacando la importancia de proteger la creatividad y los derechos de los artistas. Apenas unos días antes de la aparición de Ruxandra en The Hash, una pista musical muy falsa generada por IA titulada Heart On My Sleeve ganó fuerza al imitar las voces de los compositores Drake y the Weeknd, a pesar de que ninguno de los artistas había participado en su creación. En cambio, los creadores de la canción entrenaron al robot de inteligencia artificial utilizando música de los artistas, lo que enfureció al propietario del sello Universal Music Group.

Otros músicos han sido más receptivos a la nueva tecnología. Menos de una semana después, la música electropop Grimes invitó a sus fans a crear sus propias canciones dobladas por IA usando su voz y extendió la oferta para dividir las regalías 50/50, demostrando una solución creativa al enigma de la IA.

Dividiré el 50 % de las regalías de cualquier canción exitosa generada por IA que utilice mi voz. El mismo trato que haría con cualquier artista con el que colaboro. Siéntete libre de usar mi voz sin penalización. No tengo ninguna etiqueta ni vinculaciones legales.

– 𝔊𝔯𝔦𝔪𝔢𝔰 (@Grimezsz) 24 de abril de 2023

Teniendo en cuenta los desafíos de la propiedad intelectual, todavía no hay duda de que las herramientas musicales de IA pueden poner nuevas formas de expresión al alcance de un artista. A veces, la IA puede incluso utilizarse para mejorar la producción musical, llenando lagunas técnicas o intelectuales en las habilidades de un artista, ayudándole a dar vida a conceptos ambiciosos en cuestión de clics. Estas herramientas también pueden realizar tareas de ingeniería de sonido de manera más eficiente, reduciendo las barreras y el tiempo que lleva publicar música.

Mientras miramos hacia la Web3, las empresas y los artistas están llevando la IA aún más lejos al combinar la música con experiencias inmersivas, interactivas y generadas por el usuario en el metaverso y más allá.

Herramientas musicales de IA en Web3

Varios músicos y plataformas criptonativos ya han encontrado formas creativas de integrar herramientas de inteligencia artificial en su práctica.

Tomemos como ejemplo a VNCCII, el primer alter ego del metaverso de la productora Samantha Tauber, con sede en Sydney. Utilizando la herramienta de creación 3D en tiempo real líder en la industria, Unreal Engine, Tauber se pone su avatar para transmitir entrevistas en vivo desde el metaverso, además de actuar en conciertos y espectáculos virtuales. Como cualquier cambio de decorado o vestuario, el componente digital de la identidad artística de VNCCII está ampliando las fronteras de su arte.

La compañía de música Web3 Pixelnyx combina experiencias de realidad aumentada (AR) con juegos de metaverso y se centra en ayudar a los artistas a crear experiencias memorables para los fans. Cofundada por el productor de música electrónica Deadmau5, conocido por enviar a los fans en misiones a través de The Sandbox y presentar programas en Decentraland, PIXELYNX tiene como objetivo evolucionar nuestras nociones tradicionales de fandom mediante el uso de IA, Web3 y contenido generado por el usuario ( CGU).

En abril, Pixelnyx lanzó Korus, una herramienta que permite a los usuarios crear compañeros musicales impulsados ​​por IA utilizando contenido de artista con licencia oficial.

Conozca KORUS: compañeros de IA musical y el futuro de la música de nuestra filial @pixelynx_io 🎶🤖 Los compañeros de KORUS AI revolucionarán la creación de #música al evolucionar y adaptarse según sus elecciones, desatar la creatividad y permitir a los creadores ganar dinero con la música de una manera divertida. y una interfaz sencilla.

Más información sobre CORUS:

- Marcas Animoca (@animocabrands) 28 de abril de 2023

Cuando se utilizan con este espíritu, las herramientas musicales de IA pueden ayudar, aumentar o mejorar el estilo creativo de un artista. Si bien las herramientas aún no son lo suficientemente buenas como para reemplazar a los artistas, son impresionantes y “aprenden” constantemente a través de la interacción humana continua. Reemplazar a los músicos con IA nunca ha sido una opción popular, como lo demuestra el rechazo que recibió Spotify después de probar su propia versión de curación de música artificial. Sin embargo, a pesar de la controversia que rodea a la IA, los artistas musicales de hoy pueden beneficiarse del uso de la producción musical asistida por IA de maneras que respeten el oficio.

Ideación y colaboración

WarpSound, una plataforma de música con inteligencia artificial adaptable, ha encontrado varias formas de integrar objetos coleccionables y avatares digitales basados ​​en blockchain en sus ofertas comerciales. La empresa, que produce contenido musical, tokens no fungibles (NFT) y experiencias sociales, pronto lanzará una API de software que compone música original nota por nota en una variedad de estilos.

El fundador y director ejecutivo Chris McGarry, un empresario y ejecutivo de medios que anteriormente se desempeñó como líder musical en Oculus, la unidad de realidad virtual de Facebook, dice que las herramientas de WarpSound ayudan a los artistas a encontrar nueva inspiración y material fuente que vigorice sus procesos creativos. La compañía recibió el Game Maker Fund de The Sandbox, que apoya a los diseñadores de juegos en el metaverso de The Sandbox, y planea construir un lugar dentro de la plataforma donde los artistas puedan experimentar con música generativa.

También lanzó un AI Music Studio Artist Accelerator en asociación con el proveedor global de pagos Mastercard, donde McGarry dice haber observado nuevos beneficios para el proceso creativo.

“La semana pasada estuve en una serie de sesiones de estudio virtuales con artistas que participan en el programa”, dijo McGarry. "Estábamos trabajando con nuestra interfaz musical de IA generativa para presentar un conjunto de ideas musicales, luego le pedimos al artista que les diera forma y las repitiera hasta que llegaron a algo, cuya esencia resonaba con ellos, con lo que estaban motivados a trabajar".

WarpSound también se ha asociado con el Festival de Cine de Tribeca y YouTube para crear experiencias musicales interactivas y divertidas entre artistas y audiencias.

Composición y arreglo

Si su proyecto musical tiene menos que ver con la presentación en vivo y más con el producto terminado (tal vez esté componiendo música original para un podcast, un evento de metaverso, un canal de YouTube, un videojuego Web3 o contenido educativo), puede usar la IA para acelerar el proceso de composición y arreglo. Por supuesto, los virtuosos más talentosos del mundo probablemente puedan tocar escalas musicales mientras duermen, pero con tantos elementos en la producción de sonido y video, se está convirtiendo en una práctica estándar usar IA para insertar escalas rápidas, arpegios, corridas y armonías en la música original.

Herramientas como Riffusion permiten a los usuarios proporcionar indicaciones de texto que se transforman en música. Soundful es otra plataforma de inteligencia artificial que permite a las personas generar y descargar pistas libres de derechos.

Si desea ir un paso más allá y agregar letras, la popular herramienta ChatGPT puede escribir una canción de dos versos con pre-estribillo, estribillo, puente y final en poco menos de 30 segundos con un mínimo de indicaciones. Por supuesto, las letras pueden ser un poco simplistas o cursis, pero ¿no lo son algunas de las mejores canciones?

En la mayoría de los casos, las canciones generadas por IA son reproducibles sin necesidad de pagar derechos de licencia, dado que fueron creadas por máquinas y, por lo tanto, no están protegidas por la ley de propiedad intelectual de Estados Unidos. Sin embargo, la mayoría de las plataformas cobran una tarifa de suscripción.

Estos sonidos luego pueden acuñarse como NFT y venderse en mercados como OpenSea. Plataformas como Royal.io también permiten a los artistas unirse al sitio y ofrecer sus canciones como NFT fraccionados que ofrecen pagos de regalías a los fanáticos.

Leer más: ¿Qué son las NFT musicales?

Los límites de la producción musical con IA

Es posible que ya hayas escuchado que las herramientas de inteligencia artificial musical aún no son tan sofisticadas, especialmente en comparación con los últimos generadores de texto a imagen con inteligencia artificial (que ya se han utilizado para crear colecciones enteras de cómics) y el chatbot de Open AI, Chat GPT. (que supuestamente aprobó el examen de la barra).

De hecho, la producción de audio requiere más potencia informática que la producción de texto e imágenes estáticas y, por lo tanto, va a la zaga, según los expertos en el campo. Alexander Flores, jefe de tecnología y estrategia de la red de investigación musical Water & Music, dice que la innovación tecnológica generalmente viaja desde los formatos menos intensivos en datos hasta los más ricos. En el caso de la IA, tiene sentido que los chatbots sean quizás más rápidos de desarrollar que la renderización de audio y vídeo de la IA.

En un hilo de discusión en línea, un usuario de Reddit señaló estas limitaciones, enfatizando que si bien un escritor puede corregir y editar los resultados de un chatbot de IA en segundos, se necesitan varios minutos para escuchar una canción y, a veces, incluso horas para editarla. Las máquinas también tardan más en aprender de los conjuntos de datos de la IA, ya que los archivos de audio que las alimentan rara vez tienen descripciones de texto completas para enseñarle a la IA los atributos del archivo (género, tempo, clave, instrumentación, etc.). Mientras tanto, las IA basadas en texto e imágenes pueden rastrear rápidamente miles de palabras y elementos visuales.

“El tiempo que lleva consumir el contenido es muy importante”, dijo Flores. “Con una canción, estás encerrado durante tres minutos. No puedes acelerarlo porque entonces no estás experimentando la canción real tal como fue escrita”.

Además, las imágenes son estáticas, mientras que las canciones son más dinámicas: “El audio tiene una dimensión mucho más elevada”, afirmó Stefan Lattner, investigador jefe de Sony CSL, un laboratorio de tecnología creativa, en un panel en la Cumbre inaugural de Longitudes de Onda de Water & Music. "Mientras que las imágenes tienen una cantidad fija de píxeles, en el audio tienes una cantidad variable de segundos que deseas generar".

No obstante, Water & Music considera que la IA creativa es la tecnología más disruptiva para el negocio de la música desde Napster, la aplicación de intercambio de archivos entre pares que hizo que la distribución de música fuera prácticamente gratuita, además de sin fronteras y sin permisos, un concepto familiar para los criptonativos. .