В апреле 2023 года директор по цифровым технологиям и исполнительный вице-президент по развитию бизнеса Warner Music Group Оана Руксандра рассказала The Hash на CoinDesk, что она ожидает, что музыкальные инструменты, управляемые искусственным интеллектом (ИИ), «откроют мир так, как мы не делали раньше», вдохновляя «новые формы творчества и поджанры» в музыкальной и развлекательной индустрии.

Хотя прогноз Руксандры оптимистичен, она также признала обеспокоенность многих музыкантов: «Мы должны быть очень бдительными», — сказала она, отметив важность защиты творчества и прав артистов. Всего за несколько дней до появления Руксандры на The Hash созданный искусственным интеллектом фейковый музыкальный трек под названием Heart On My Sleeve приобрел популярность благодаря имитированию голосов авторов песен Drake и The Weeknd, хотя ни один из исполнителей не участвовал в его создании. Вместо этого создатели песни обучили бота с искусственным интеллектом, используя музыку исполнителей, что разозлило владельца лейбла Universal Music Group.

Другие музыканты более благосклонно отнеслись к новой технологии. Менее чем через неделю электропоп-музыкант Граймс предложила своим поклонникам создавать свои собственные песни, дублированные с помощью ИИ, используя ее голос, и предложила разделить гонорары 50/50, продемонстрировав одно творческое решение загадки ИИ-подделок.

Я разделю 50% гонорара за любую успешную песню, созданную искусственным интеллектом, в которой используется мой голос. То же самое, что и с любым артистом, с которым я сотрудничаю. Не стесняйтесь использовать мой голос без каких-либо штрафов. У меня нет ярлыка и никаких юридических привязок.

— 𝔊𝔯𝔦𝔪𝔢𝔰 (@Grimezsz)  24 апреля 2023 г.

Учитывая проблемы интеллектуальной собственности, по-прежнему нет сомнений в том, что музыкальные инструменты искусственного интеллекта могут предоставить артисту новые формы самовыражения. Иногда ИИ можно даже использовать для улучшения музыкального производства, заполняя технические или интеллектуальные пробелы в способностях артистов, помогая им воплотить в жизнь амбициозные концепции в несколько кликов. Эти инструменты также могут более эффективно выполнять задачи по звукорежиссуре, снижая барьеры и время, необходимое для выпуска музыки.

Когда мы смотрим на Web3, компании и артисты продвигают искусственный интеллект еще дальше, сочетая музыку с захватывающим, интерактивным и создаваемым пользователями опытом в метавселенной и за ее пределами.

Музыкальные инструменты AI в Web3

Ряд криптовалютных музыкантов и платформ уже нашли творческие способы интеграции инструментов искусственного интеллекта в свою практику.

Возьмем, к примеру, VNCCII, первое метавселенное альтер-эго сиднейской женщины-продюсера Саманты Таубер. Используя ведущий в отрасли инструмент для создания 3D-изображений в реальном времени Unreal Engine, Таубер надевает свой аватар для потоковой передачи интервью в прямом эфире из метавселенной, а также для выступлений на виртуальных концертах и ​​шоу. Как и любая смена декораций или костюмов, цифровая составляющая творческой идентичности VNCCII расширяет границы ее творчества.

Музыкальная компания Web3 Pixelnyx сочетает в себе возможности дополненной реальности (AR) с метавселенными играми и стремится помочь артистам создавать незабываемые впечатления для фанатов. Основанная продюсером электронной музыки Deadmau5, который известен тем, что отправляет фанатов на квесты через The Sandbox и проводит шоу в Децентралэнде, PIXELYNX стремится развивать наши традиционные представления о фэндоме посредством использования искусственного интеллекта, Web3 и пользовательского контента ( пользовательский контент).

В апреле Pixelnyx выпустила Korus, инструмент, который позволяет пользователям создавать музыкальные компаньоны на базе искусственного интеллекта, используя официально лицензированный контент исполнителей.

Познакомьтесь с KORUS — музыкальными ИИ-компаньонами и будущим музыки от нашей дочерней компании @pixelynx_io 🎶🤖 ИИ-компаньоны KORUS произведут революцию в создании #музыки, развиваясь и адаптируясь на основе вашего выбора, раскрывая творческие способности и позволяя авторам зарабатывать на музыке с удовольствием. и простой интерфейс.

Узнайте больше о КОРУС:

– Animoca Brands (@animocabrands)  28 апреля 2023 г.

При использовании в этом духе музыкальные инструменты искусственного интеллекта могут помочь, дополнить или улучшить творческий стиль артиста. Хотя эти инструменты еще недостаточно хороши, чтобы заменить художников, они впечатляют и постоянно «обучаются» посредством постоянного человеческого взаимодействия. Замена музыкантов искусственным интеллектом никогда не была популярной инициативой, о чем свидетельствует отказ Spotify, полученный после тестирования собственной версии искусственного курирования музыки. Тем не менее, несмотря на разногласия вокруг ИИ, современные музыкальные исполнители могут получить выгоду от использования создания музыки с помощью ИИ таким образом, чтобы уважать это ремесло.

Идея и сотрудничество

WarpSound, адаптивная музыкальная платформа искусственного интеллекта, нашла несколько способов интегрировать предметы коллекционирования на основе блокчейна и цифровые аватары в свои бизнес-предложения. Компания, которая производит музыкальный контент, невзаимозаменяемые токены (NFT) и социальные возможности, вскоре выпустит программный API, который по нотам составляет оригинальную музыку в различных стилях.

Основатель и генеральный директор Крис МакГарри, предприниматель и руководитель СМИ, ранее ушедший с должности музыкального руководителя в подразделении виртуальной реальности Facebook Oculus, говорит, что инструменты WarpSound помогают артистам находить новое вдохновение и исходный материал, который активизирует их творческие процессы. Компания является получателем Фонда Game Maker Fund от The Sandbox, который поддерживает гейм-дизайнеров в метавселенной The Sandbox, и планирует построить домашнюю площадку внутри платформы, где артисты смогут экспериментировать с генеративной музыкой.

В партнерстве с глобальным платежным провайдером Mastercard компания также запустила AI Music Studio Artist Accelerator, где, по словам МакГарри, он заметил новые преимущества творческого процесса.

«На прошлой неделе я присутствовал на серии виртуальных студийных сессий с артистами, участвующими в программе», — сказал МакГарри. «Мы работали с нашим генеративным музыкальным интерфейсом искусственного интеллекта, чтобы представить набор музыкальных идей, а затем просили артиста формировать их и повторять, пока они не пришли к чему-то, суть чего резонировала с ними, с чем у них была мотивация работать».

WarpSound также сотрудничает с кинофестивалем Tribeca и YouTube, чтобы создавать интерактивные и игривые музыкальные впечатления между артистами и публикой.

Составление и аранжировка

Если ваш музыкальный проект ориентирован не столько на живое исполнение, сколько на готовый продукт (возможно, вы сочиняете оригинальную музыку для подкаста, мероприятия метавселенной, канала YouTube, видеоигры Web3 или образовательного контента), вы можете использовать ИИ, чтобы ускорить процесс создания композиция и аранжировка. Конечно, самые талантливые виртуозы в мире, вероятно, могут сочинять музыкальные гаммы во сне, но из-за такого большого количества элементов для создания звука и видео становится стандартной практикой использовать ИИ для вставки быстрых гамм, арпеджио, партий и гармоний в оригинальную музыку.

Такие инструменты, как Riffusion, позволяют пользователям предоставлять текстовые подсказки, которые преобразуются в музыку. Soundful — еще одна платформа искусственного интеллекта, которая позволяет людям создавать и скачивать треки без лицензионных отчислений.

Если вы хотите пойти еще дальше и добавить текст, популярный универсальный инструмент ChatGPT может написать песню из двух куплетов с предварительным припевом, припевом, бриджем и завершением всего за 30 секунд с минимальными подсказками. Конечно, тексты могут быть немного упрощенными или банальными, но разве это не одни из лучших песен?

В большинстве случаев песни, созданные с помощью ИИ, можно воспроизводить без необходимости платить лицензионные сборы, поскольку они были созданы машинами и, следовательно, не защищены законодательством США об интеллектуальной собственности. Однако большинство платформ взимают абонентскую плату.

Эти звуки затем можно будет создать в виде NFT и продать на таких торговых площадках, как OpenSea. Такие платформы, как Royal.io, также позволяют артистам присоединяться к сайту и предлагать свои песни в виде дробных NFT, которые предлагают фанатам выплаты роялти.

Подробнее: Что такое музыкальные NFT?

Ограничения производства музыки с помощью ИИ

Возможно, вы уже слышали, что музыкальные инструменты искусственного интеллекта еще не настолько сложны, особенно по сравнению с новейшими генераторами текста в изображения искусственного интеллекта (которые уже использовались для создания целых коллекций комиксов) и чат-ботом Open AI Chat GPT. (который, как сообщается, сдал экзамен на адвоката).

По мнению экспертов в этой области, производство аудио действительно требует больше вычислительной мощности, чем вывод статического текста и изображений, и поэтому отстает. Александр Флорес, руководитель отдела технологий и стратегии музыкальной исследовательской сети Water & Music, говорит, что технологические инновации обычно распространяются от наименее ресурсоемких форматов к самым богатым. В случае с ИИ вполне понятно, почему чат-боты разрабатываются быстрее, чем рендеринг аудио и видео с помощью ИИ.

В одной из веток онлайн-дискуссии пользователь Reddit указал на эти ограничения, подчеркнув, что, хотя автор может корректировать и редактировать результаты чат-бота с искусственным интеллектом за секунды, прослушивание песни занимает несколько минут, а иногда даже часы, чтобы отредактировать ее. Машины также медленнее обучаются на наборах данных ИИ, поскольку аудиофайлы, которые передают им информацию, редко имеют подробные текстовые описания, позволяющие ИИ узнать об атрибутах файла (жанр, темп, тональность, инструменты и т. д.). Между тем, искусственный интеллект на основе текста и изображений может быстро анализировать тысячи слов и изображений.

«Очень важно, сколько времени потребуется на потребление контента», — сказал Флорес. «С песней ты заперт на три минуты. Вы не можете ускорить ее, потому что тогда вы не ощутите настоящую песню в том виде, в каком она была написана».

Кроме того, изображения статичны, а песни более динамичны: «Аудио просто гораздо более многомерно», — сказал Стефан Латтнер, управляющий исследователь Sony CSL, лаборатории творческих технологий, на панели на первом саммите Wavelengths Summit, организованном Water & Music. «В то время как изображения имеют фиксированное количество пикселей, в аудио у вас есть переменное количество секунд, которые вы хотите сгенерировать».

Тем не менее, Water & Music называет творческий искусственный интеллект самой революционной технологией для музыкального бизнеса со времен Napster, однорангового приложения для обмена файлами, которое сделало распространение музыки практически бесплатным, а также без границ и разрешений — концепция, знакомая крипто-аборигенам. .