У квітні 2023 року головний цифровий директор Warner Music Group і виконавчий віце-президент із розвитку бізнесу Оана Руксандра сказала The Hash на CoinDesk, що вона очікує, що музичні інструменти, керовані штучним інтелектом (ШІ), «відкриють світ, як ми не робили раніше», надихаючи «нові форми творчості та піджанри» в індустрії музики та розваг.

Хоча перспективи Руксандри оптимістичні, вона також визнала стурбованість багатьох музикантів: «Ми повинні бути дуже пильними», — сказала вона, зазначивши важливість захисту творчості та прав артистів. Лише за кілька днів до появи Руксандри на The Hash музичний трек під назвою Heart On My Sleeve, створений за допомогою штучного інтелекту, набув популярності, імітуючи голоси авторів пісень Дрейка та Weeknd, хоча жоден із артистів не брав участі в його створенні. Натомість творці пісні навчили бота зі штучним інтелектом, використовуючи музику виконавців, що викликало гнів власника лейблу Universal Music Group.

Інші музиканти більш привітно сприйняли нову технологію. Менш ніж через тиждень електропоп-музикант Граймс запропонував своїм шанувальникам створювати власні пісні, озвучені штучним інтелектом, використовуючи її голос, і розширив пропозицію розділити гонорари 50/50, продемонструвавши одне творче рішення головоломки штучного інтелекту.

Я поділю 50% гонорару за будь-яку успішну пісню, згенеровану штучним інтелектом, у якій використовується мій голос. Так само, як і з будь-яким виконавцем, з яким я співпрацюю. Не соромтеся використовувати мій голос без штрафних санкцій. У мене немає етикетки та жодних юридичних зобов’язань.

— 𝔊𝔯𝔦𝔪𝔢𝔰 (@Grimezsz)  24 квітня 2023 р.

Пам’ятаючи про проблеми інтелектуальної власності, немає жодних сумнівів, що музичні інструменти штучного інтелекту можуть надати артистам нові форми вираження. Іноді штучний інтелект можна навіть використовувати для покращення музичного виробництва, заповнюючи технічні або інтелектуальні прогалини в здібностях виконавця, допомагаючи їм втілити амбітні концепції в життя за кілька кліків. Ці інструменти також можуть ефективніше виконувати завдання звукоінженерії, знижуючи бар’єри та час, потрібний для випуску музики.

Дивлячись на Web3, компанії та митці ще більше просувають ШІ, поєднуючи музику з захоплюючими, інтерактивними та створеними користувачами досвідом у метавсесвіті та за його межами.

Музичні інструменти ШІ в Web3

Кілька музикантів і платформ, що використовують криптовалюту, вже знайшли креативні способи інтегрувати інструменти ШІ у свою практику.

Візьмемо, наприклад, VNCCII, перше метавсесвітнє альтер-его продюсерки Саманти Таубер із Сіднея. Використовуючи провідний інструмент створення 3D у реальному часі Unreal Engine, Таубер одягає свій аватар, щоб транслювати інтерв’ю в прямому ефірі з метавсесвіту, а також виступати на віртуальних концертах і шоу. Як і будь-яка зміна декорацій чи костюмів, цифровий компонент художньої ідентичності VNCCII розширює межі її майстерності.

Музична компанія Web3 Pixelnyx поєднує досвід доповненої реальності (AR) з іграми метавсесвіту та зосереджена на тому, щоб допомогти артистам створювати незабутні враження для шанувальників. Співзасновником PIXELYNX є продюсер електронної музики Deadmau5, який відомий тим, що відправляє шанувальників на квести через The Sandbox і проводить шоу в Decentraland, і прагне розвивати наші традиційні уявлення про фандом за допомогою штучного інтелекту, Web3 і контенту, створеного користувачами ( UGC).

У квітні Pixelnyx випустила Korus, інструмент, який дозволяє користувачам створювати музичні компаньйони на основі ШІ, використовуючи офіційно ліцензований вміст виконавців.

Зустрічайте KORUS – музичних супутників штучного інтелекту та майбутнє музики від нашої дочірньої компанії @pixelynx_io 🎶🤖 Компанії KORUS AI зроблять революцію у створенні #музики, розвиваючись і адаптуючись на основі вашого вибору, розкриваючи креативність і дозволяючи творцям заробляти на музиці з задоволенням і простий інтерфейс.

Дізнайтеся більше про КОРУС:

— Animoca Brands (@animocabrands)  28 квітня 2023 р.

При використанні в цьому дусі музичні інструменти штучного інтелекту можуть допомогти, розширити або покращити творчий стиль виконавця. Хоча інструменти ще недостатньо хороші, щоб замінити художників, вони вражають і постійно «навчаються» через постійну взаємодію з людьми. Заміна музикантів штучним інтелектом ніколи не була популярною, як підтвердив негативний вплив Spotify після тестування власної версії штучного курування музики. Проте, незважаючи на суперечки навколо штучного інтелекту, сучасні музиканти можуть отримати вигоду від використання музичного виробництва за допомогою штучного інтелекту таким чином, щоб поважати ремесло.

Ідея та співпраця

WarpSound, адаптивна музична платформа штучного інтелекту, знайшла кілька способів інтегрувати предмети колекціонування та цифрові аватари на основі блокчейну у свої бізнес-пропозиції. Компанія, яка виробляє музичний контент, незамінні токени (NFT) і соціальні програми, незабаром випустить програмний API, який створює оригінальну музику нота за нотою в різних стилях.

Засновник і генеральний директор Кріс МакГаррі, підприємець і медіакерівник, який раніше залишив посаду музичного керівника підрозділу віртуальної реальності Facebook Oculus, каже, що інструменти WarpSound допомагають художникам знаходити нове натхнення та вихідний матеріал, який стимулює їх творчий процес. Компанія є одержувачем фонду The Sandbox’s Game Maker Fund, який підтримує дизайнерів ігор у метавсесвіті The Sandbox, і планує побудувати домашній майданчик на платформі, де артисти зможуть експериментувати з генеративною музикою.

Він також запустив AI Music Studio Artist Accelerator у партнерстві з глобальним постачальником платіжних послуг Mastercard, де МакГаррі каже, що він помітив нові переваги для творчого процесу.

«Минулого тижня я брав участь у сеансах у віртуальній студії з художниками, які беруть участь у програмі, — сказав МакГеррі. «Ми працювали з нашим генеративним музичним інтерфейсом штучного інтелекту, щоб представити набір музичних ідей, а потім запропонували художнику формувати їх і повторювати, доки вони не досягли чогось, суть чого резонувала з ними, з чим вони були мотивовані працювати».

WarpSound також співпрацює з кінофестивалем Tribeca та YouTube, щоб створити інтерактивну та веселу музику між артистами та аудиторією.

Складання та аранжування

Якщо ваш музичний проект стосується не живого виступу, а більше кінцевого продукту — можливо, ви створюєте оригінальну музику для подкасту, події метавсесвіту, каналу YouTube, відеоігри Web3 чи освітнього контенту — ви можете використовувати ШІ, щоб пришвидшити процес композиція та аранжування. Звичайно, найталановитіші віртуози світу, ймовірно, можуть виконувати музичні гами уві сні, але з такою кількістю елементів у створенні звуку та відео стає стандартною практикою використання штучного інтелекту для швидкого вставлення гам, арпеджіо, дій і гармоній до оригінальної музики.

Такі інструменти, як Riffusion, дозволяють користувачам надавати текстові підказки, які перетворюються на музику. Soundful — це ще одна платформа AI, яка дозволяє людям створювати та завантажувати безкоштовні треки.

Якщо ви хочете зробити ще один крок далі та додати слова, популярний універсальний інструмент ChatGPT може написати пісню з двох куплетів із передприспівом, приспівом, бриджем та аутро лише за 30 секунд із мінімальними підказками. Звичайно, тексти можуть бути трохи спрощеними або химерними, але хіба це не найкращі пісні?

У більшості випадків пісні, створені штучним інтелектом, можна відтворювати без необхідності сплачувати ліцензійні збори, враховуючи, що вони створені машинами і тому не захищені законодавством США про інтелектуальну власність. Однак більшість платформ стягують плату за підписку.

Потім ці звуки можна карбувати як NFT і продавати на таких ринках, як OpenSea. Такі платформи, як Royal.io, також дозволяють виконавцям приєднуватися до сайту та пропонувати свої пісні як фракціоновані NFT, які пропонують виплати роялті шанувальникам.

Докладніше: Що таке музичні NFT?

Обмеження виробництва музики ШІ

Можливо, ви вже чули, що музичні інструменти штучного інтелекту ще не такі складні, особливо якщо порівнювати з останніми генераторами штучного інтелекту, що перетворюють текст у зображення (які вже використовувалися для створення цілих колекцій коміксів) і чат-ботом Open AI Chat GPT (який, як повідомляється, склав іспит на адвоката).

Виробництво аудіо справді потребує більшої обчислювальної потужності, ніж виведення статичного тексту та зображень, і тому, на думку експертів у цій галузі, воно відстає. Александер Флорес, керівник відділу технологій і стратегії музичної дослідницької мережі Water & Music, каже, що технологічні інновації зазвичай поширюються від форматів з найменшою інтенсивністю даних до найбагатших. У випадку штучного інтелекту є сенс, чому чат-боти розвиваються швидше, ніж рендеринг аудіо та відео ШІ.

В одному з ланцюжків онлайн-обговорень користувач Reddit вказав на ці обмеження, підкресливши, що хоча автор може вичитувати та редагувати результати чат-бота штучного інтелекту за лічені секунди, для прослуховування пісні потрібно кілька хвилин, а іноді навіть години, щоб її редагувати. Машини також повільніше навчаються з наборів даних ШІ, оскільки аудіофайли, які їх подають, рідко мають вичерпні текстові описи, щоб навчити ШІ атрибутам файлу (жанр, темп, тональність, інструментування тощо). Тим часом штучний інтелект на основі тексту та зображень може швидко переглядати тисячі слів і зображень.

«Скільки часу потрібно для споживання контенту, дуже важливо», — сказав Флорес. «З піснею ти замкнений на три хвилини. Ви не можете пришвидшити це, тому що тоді ви не відчуєте справжню пісню, як вона була написана».

Крім того, зображення є статичними, тоді як пісні більш динамічними: «Аудіо має набагато більше вимірів», — сказав Штефан Латтнер, керуючий науковий співробітник Sony CSL, творчої технологічної лабораторії, під час панелі на першому саміті Wavelengths Summit Water & Music. «У той час як зображення мають фіксовану кількість пікселів, в аудіо у вас є змінна кількість секунд, які ви хочете створити».

Незважаючи на це, Water & Music називає креативний штучний інтелект найпроривнішою технологією для музичного бізнесу з часів Napster, однорангової програми для обміну файлами, яка зробила розповсюдження музики практично безкоштовним, а також без меж і дозволів – концепція, знайома крипто-туземцям. .