Как создавать музыку с помощью ИИ в 2023 году (Учебное пособие)

Вы когда-нибудь мечтали стать профессиональным музыкантом, но у вас нулевой музыкальный талант? Благодаря искусственному интеллекту (ИИ) теперь можно создавать потрясающие треки, используя только текстовую подсказку. Генераторы музыки с искусственным интеллектом сейчас являются самой горячей тенденцией в области искусственного интеллекта, и на это есть веские причины. Те, у кого практически нет музыкальных способностей, могут создавать потрясающие саундтреки для использования в сообщениях в социальных сетях, видеороликах на YouTube и т. д. В этом посте мы объясним, как работает генеративный ИИ и как создавать музыку с помощью ИИ за несколько шагов.

Давайте погрузимся.

Что такое AI-музыка?

С момента появления генеративного ИИ в 2015 году появились различные формы искусственного интеллекта, в том числе преобразование текста в речь, обработка естественного языка и генераторы искусств ИИ. Как и другие формы, музыка с искусственным интеллектом использует текстовые подсказки для создания музыкальных треков с различными инструментами, стилями и жанрами. Он также может создавать композиции, изменять существующую музыку или даже генерировать вокал.

Вот короткий клип, который мы создали с помощью Mubert, используя краткую текстовую подсказку:

Как работает искусственный интеллект в музыке?

Как и другие формы генеративного искусственного интеллекта, программное обеспечение, используемое для создания музыки, основано на компьютерных системах глубокого обучения, обученных на огромных объемах музыкальных данных, таких как песни, исполнители и жанры. Эти модели могут быть основаны на рекуррентных нейронных сетях (RNN), генеративно-состязательных сетях (GAN), генеративных предварительно обученных преобразователях (GPT) или поиске музыкальной информации (MIR). Чтобы помочь вам понять значение этих терминов, давайте разберем, что представляет собой каждый из них.

Рекуррентные нейронные сети

Рекуррентные нейронные сети (RNN) — это специализированные нейронные сети, которые отлично справляются с пониманием и обработкой данных, которые поступают в виде последовательностей, таких как предложения или временные ряды. Они работают аналогично тому, как наш мозг обрабатывает информацию. Проще говоря, RNN могут предсказывать результаты на основе последовательных данных, с чем сталкиваются другие алгоритмы ИИ. RNN особенно полезны при работе с данными, которые следуют определенному порядку или шаблону, например с музыкой.

Генеративно-состязательные сети

Хотя они в основном используются для создания изображений, аватаров и других форм ИИ, они также используются для создания музыки с использованием ИИ. Состоящий из двух частей — генератора и дискриминатора — GANS использует эти две нейронные сети для обучения систем генерации музыки. Дискриминатор используется для определения того, является ли введенный ввод реальным или поддельным. Задача генератора — попытаться обмануть дискриминатор. На протяжении тысяч обучающих сеансов генератор будет улучшать результаты до такой степени, что дискриминатор не сможет заметить разницу. При создании изображений это относительно простая задача. Однако в музыке существует почти неограниченное количество переменных, включая инструменты, жанр, стиль, время и многое другое.

Генеративные предварительно обученные трансформаторы

Генеративные предварительно обученные преобразователи, созданные разработчиками ChatGPT, представляют собой продвинутые языковые модели, сочетающие в себе возможности преобразователей и предварительного обучения. Они учатся на больших объемах данных и могут генерировать текст, изображения и музыку, похожие на человеческие. Модель GPT, основанная на музыке, работает путем ввода начальной последовательности, которая позволяет модели предсказывать следующую ноту или аккорды в песне.

Поиск музыкальной информации (МИР)

МИР — это область изучения и разработки методов, которые позволяют компьютерам анализировать, понимать и извлекать информацию из музыкальных данных. Он работает как мост между музыкой и машиной, используя алгоритмы искусственного интеллекта для обработки и интерпретации музыкального контента. Например, с помощью MIR машины могут научиться классифицировать музыку по жанрам, настроениям или другим классам на основе аудиофункций и метаданных. Затем машины используют эту информацию для создания оригинальной музыки на основе темпа, ритмических рисунков, гармонической структуры или аккордов и т. д.

Преимущества использования искусственного интеллекта для создания музыки

Одним из самых больших преимуществ генераторов музыки с искусственным интеллектом является их простота использования. Возьмем, к примеру, Муберта (подробнее мы углубимся в это позже в этом посте). Вы пишете краткое описание музыки, которую хотите создать, и через несколько минут у вас будет фоновая дорожка, готовая к использованию в ваших творческих проектах. Эти программы также предлагают дополнительное преимущество создания музыки без лицензий, а это означает, что вы можете использовать созданную музыку где угодно, не беспокоясь о контрактах или юридических соглашениях.

Еще один ключевой фактор, который делает музыкальные генераторы с искусственным интеллектом такими привлекательными, — это цена. Большинство платформ предлагают бесплатное использование или стоят не более 20–30 долларов в месяц, что обеспечивает доступность даже для самых экономных клиентов. Наконец, эти инструменты также обеспечивают высокий уровень настройки. Многие программы искусственного интеллекта, такие как Landr, предоставляют загружаемые приложения, которые позволяют редактировать музыкальные клипы, добавлять вокал и даже смешивать их с другими треками. Раньше эти задачи требовали обширных знаний в программах редактирования музыки, но благодаря возможностям искусственного интеллекта любой может стать искусным музыкальным исполнителем.

Как создавать музыку с помощью искусственного интеллекта

Вы можете использовать несколько программ для создания музыки с помощью ИИ, но в этом уроке мы покажем вам, как это сделать с помощью Mubert.

Mubert — отличный музыкальный генератор, позволяющий создавать персонализированную музыку для фоновых треков. Музыку можно создавать через веб-приложение или API. Основным преимуществом Mubert является простота использования. Вы можете создавать саундтреки для игр, маркетинговых видеороликов, приложений и многого другого, используя простую текстовую подсказку. Доступны как бесплатные, так и платные планы, причем бесплатная версия позволяет создавать до 25 бесплатных треков. Однако, если вы используете бесплатную версию, вам нужно будет указать использование, указав ссылку на их веб-сайт.

Давайте посмотрим, как создать свой первый шедевр.

1. Зарегистрируйте бесплатную учетную запись

Первым шагом является регистрация бесплатной учетной записи. Начните с перехода на веб-сайт Mubert и нажатия кнопки регистрации .

Вы можете войти в систему с помощью Google или Facebook или создать новую учетную запись, используя свой адрес электронной почты и пароль. После завершения нажмите кнопку «Создать учетную запись» .

Mubert отправит вам по электронной почте код подтверждения, который вам необходимо будет предоставить для завершения процесса регистрации.

Получив код, вставьте его в текстовое поле и нажмите «Создать учетную запись» .

2. Изучите интерфейс Mubert

Как только ваша учетная запись будет создана, вы впервые увидите интуитивно понятный интерфейс Mubert. Вы можете легко создать новый трек (1) или выполнить поиск по ссылочному URL-адресу (2), который мы подробно объясним позже в этом посте. Между тем, при использовании функции создания трека вы можете ввести текстовую подсказку (3), установить продолжительность трека (4) или выбрать жанр, настроение или действие для создания музыки (5). После заполнения всех полей нажмите кнопку «Создать трек» (6), чтобы увидеть силу Муберта.

Как создавать музыку с помощью искусственного интеллекта: жанры

Прежде чем мы перейдем к созданию вашего первого музыкального произведения с использованием искусственного интеллекта из текстовой подсказки, давайте углубимся в жанры Mubert. Они отлично подходят для создания музыки в определенном стиле, например эмбиент, классика или рок. Те, кому нужна помощь с тем, что написать в подсказке, могут использовать для сочинения музыки заранее определенные стили, например жанры. Например, если вы выберете жанр EDM , вы можете создать клип с сильной базовой линией.

Как создавать музыку с помощью искусственного интеллекта: настроения

Точно так же вы можете выбрать такое настроение, как красивое, спокойное, бодрящее и т. д., чтобы задать тон вашему клипу. Например, мы создали этот 15-секундный трек, выбрав красивое и умиротворяющее настроение.

Как создать музыку с генеративным искусственным интеллектом: действия

Наконец, вы можете применить стиль активности к своей музыке, выбрав одну из предустановок активности, включая расслабление, концентрацию, игру или спорт. Например, вы можете выбрать вид сна , а затем выбрать подкатегорию, например дождь , чтобы создать реалистичные звуки дождя, которые можно использовать в других проектах.

Отметим, что при использовании пресетов невозможно выбрать сразу несколько категорий. Например, если вы выбираете настроение, вы не можете одновременно выбирать жанр или занятие. Вы можете ввести подсказку, если хотите объединить жанры, настроения или занятия.

3. Создайте свой первый музыкальный трек с искусственным интеллектом

Мы покажем вам, как создавать музыку с помощью искусственного интеллекта, с помощью текстовой подсказки для этого шага. Чтобы уменьшить размер нашего поста, мы будем использовать продолжительность 15 секунд, но вы можете выбрать любую продолжительность по своему усмотрению. Как и в случае с другими генеративными искусственными интеллектами, чем меньше текста, тем лучше. Особенно это касается Муберта. Использование длинных описательных подсказок, скорее всего, запутает его и приведет к нежелательным результатам. Поэтому лучше всего, чтобы подсказки были краткими и лаконичными.

Начните с ввода следующей подсказки в текстовое поле: Progressive, Vocal, Tribal, House, Minimal (1). Затем установите продолжительность на 15 секунд (2), затем нажмите «Создать трек» (3). Как только ваш трек будет завершен, он будет виден прямо под элементами управления. Отсюда щелкните значок воспроизведения (4), чтобы просмотреть трек. Вы можете нажать кнопку «Регенерировать», если хотите восстановить трек на основе того же запроса (5). Если вы удовлетворены результатами, щелкните значок загрузки , чтобы сохранить его (6) в списке загрузок. Помните, что бесплатным пользователям разрешено максимум 25 треков, поэтому, если результат вам не понравится, обязательно удалите его (7).

Если вы восстанавливаете трек, вы можете выбирать между треком, лупом, миксом или джинглом. Мы выберем настройку микса и оставим длину трека равной 15 секундам.

Вот оригинальный трек перед его микшированием:

Это ремикс трека:

Поиск по ссылке

Помимо создания музыки AI с помощью текстовой подсказки или предустановки, вы можете использовать функцию поиска по ссылке. Эта функция позволяет вам ввести URL-адрес YouTube для поиска треков, содержащихся в видео. Например, для проверки мы воспользуемся одним из наших собственных видеороликов. Введите URL-адрес YouTube (1), затем нажмите кнопку поиска треков (2).

По нашему опыту, поиск по эталонному видео занимает немного больше времени, чем при использовании текстовой подсказки, и результаты были неоднозначными. Вероятно, это связано с тем, что инструмент все еще находится в стадии бета-тестирования, поэтому, несомненно, есть некоторые недостатки, которые нужно устранить.

4. Загрузите свой трек

Как уже упоминалось, вы можете загружать и использовать свои треки в проектах. Однако если вы используете бесплатную учетную запись, вы должны приписать контент Муберту. Чтобы загрузить сохраненный трек, перейдите к изображению аватара в правом верхнем углу экрана, затем нажмите «Мои загрузки» .

Оттуда вы можете нажать на любой из своих треков, чтобы загрузить его.

Когда появится всплывающее окно, щелкните значок копирования (1), чтобы скопировать текст указания авторства, затем нажмите «Согласиться и загрузить» (2).

Если вы хотите свободно контролировать использование вашей новой музыки AI, вы можете подписаться на платную подписку. Планы по разумной цене: план для создателей начинается всего с 11,69 долларов США в месяц. Независимо от подписки вы не сможете загрузить свое творение в Spotify, Apple Music и т.п. Однако вы можете продать свой трек в Mubert Studio, о чем мы расскажем в следующем разделе.

5. Разместите свой трек в Mubert Studio.

Одним из лучших аспектов Mubert является возможность получать пассивный доход от создаваемых вами музыкальных треков с помощью ИИ. Использование Mubert Studio. Для начала нажмите кнопку «Внести вклад» на домашней странице Mubert Studio.

Далее вам нужно будет настроить свою учетную запись. Начните с ввода адреса электронной почты (1), затем нажмите кнопку «Продолжить» (2).

Создайте пароль (1), затем снова нажмите «Продолжить» (2).

Создание вашего первого потока

После входа в систему вы готовы создать свой первый поток. Начните с нажатия кнопки «Создать поток» в левом верхнем углу интерфейса.

Когда экран обновится, вы увидите несколько пустых полей. Вы заполните их, чтобы разместить свой трек в Mubert's Studio. Начните с названия трека (1), определите тональность (2), масштаб (3), количество ударов в минуту (BPM) (4) и назначьте действие (5). Это единственные обязательные поля, но заполнение остальных полей для настроения, погоды, жанра и тегов позволит другим пользователям найти ваш трек при поиске.

Чтобы найти тональность и BPM для вашего трека, перейдите к загрузкам в Mubert, затем нажмите на трек, который вы планируете добавить в студию.

После установки параметров нажмите кнопку «Добавить/редактировать сэмпл», чтобы добавить трек.

Затем нажмите «Загрузить» , чтобы добавить загруженный трек с вашего компьютера. Примечание. Studio не позволит вам загружать MP3, поэтому вам необходимо преобразовать загруженный трек в файл WAV. Однако не беспокойтесь: вы можете использовать программное обеспечение с открытым исходным кодом, такое как медиаплеер VLC, для преобразования файлов.

После загрузки трека убедитесь, что BPM и тональность совпадают, затем нажмите кнопку «Изменить настройки потока ».

Наконец, вы можете запустить трансляцию, нажав кнопку «Сохранить трансляцию» .

Нажмите «Мои потоки» на главной странице, чтобы просмотреть, отредактировать или прослушать свои потоки.

Музыкальные генераторы AI с голосом

Mubert отлично подходит для создания фоновых треков, но что, если вам нужна музыка и вокал? Есть два способа создания голосовых дорожек. Если вы хотите создать закадровый голос или другую естественно звучащую речь, вы можете использовать генераторы голоса с искусственным интеллектом. Однако они обычно не включают в себя инструмент для пения голосов. В этом случае вам понадобится аудиоинструмент AI. Один из инструментов в этом списке представлен в другом сообщении блога. Два других — это загружаемые приложения, которые помогут вам создавать произведения искусства, сочетая голос и фоновую музыку.

Ландр

Landr — это лучший аудиоинструмент с искусственным интеллектом, который позволяет создавать, редактировать и распространять музыку через интуитивно понятный интерфейс. За небольшую ежемесячную плату в 12 долларов вы получите доступ к виртуальной студии, где вы сможете с легкостью микшировать и мастерить свои творения. Landr, используемый записывающимися артистами, такими как Леди Гага и Post Malone, является идеальной платформой для профессионалов.

Стоимость: 12 долларов в месяц.

Получить Ландр

Синтезатор V

Dreamsonics Synthesizer V – еще одна отличная программа, если вы хотите создавать музыку с вокалом. Вы можете создавать треки с помощью текстовых подсказок, а затем применять свой любимый голос искусственного интеллекта. Приложение можно загрузить бесплатно, и оно поставляется с образцами голосов искусственного интеллекта, с которыми можно поиграть. Если вы решите, что эта платформа вам подходит, вы можете приобрести множество голосов ИИ. В бесплатной версии вы можете создать до трех треков, что дает вам достаточно времени, чтобы решить, подходит ли это вашим потребностям.

Цена: бесплатно, стоимость пакетов начинается от 79 долларов.

Получить синтезатор V

Отозвать

Последний инструмент для вокала — Revocalize. Он работает иначе, чем другие инструменты в нашем списке. Вы можете записать свой голос вместо генерации голосов с помощью текстовой подсказки. Благодаря волшебству искусственного интеллекта Revocalize изменяет и улучшает ваш голос, а также позволяет добавлять различные тона, эффекты и высоту звука. Более того, они используют запатентованный алгоритм, модель пения голосовой идентификации (UVI), которая защищает и защищает ваш голос. Защита авторских прав дает вам право использовать его по своему усмотрению. Это отличная функция, учитывая все проблемы с авторскими правами, с которыми сталкиваются другие платформы искусственного интеллекта.

Примечание. Если вы хотите получить доступ к бесплатной версии Revocalize, вы должны зарегистрироваться и быть в списке ожидания.

Цена: бесплатно, ежемесячные планы начинаются от 9 долларов.

Получить отзыв

Будущее ИИ-музыки

Будущее музыки, генерируемой искусственным интеллектом, светлое. Некоторые могут рассматривать это как угрозу рынку труда или человеческому творчеству, но это неверно. То есть, если законодатели смогут ввести некоторую правовую защиту для защиты прав создателей ИИ и людей-художников. В настоящее время границы между оригинальностью и авторством размыты. На рассмотрении находятся судебные процессы с участием крупных игроков индустрии искусственного интеллекта, поэтому будет интересно посмотреть, чем все это обернется. Между тем, перед принятием решения важно изучить алгоритмы создания и обучения платформы. Благодаря прочному партнерству ИИ может служить инструментом для оптимизации процесса создания музыки.

Заключительные мысли о создании музыки с помощью искусственного интеллекта

Если вам нужен фоновый трек для вашего следующего видео на YouTube или полноценный трек с вокалом, музыка с искусственным интеллектом — отличный способ сделать это. Благодаря возможностям искусственного интеллекта вы можете создавать музыку с помощью искусственного интеллекта из текстовой подсказки, редактировать ее и легко публиковать за считанные минуты. Используя такие инструменты, как Mubert или Landr, можно добиться профессиональных результатов без какого-либо опыта.

Хотите узнать больше об искусственном интеллекте? Ознакомьтесь с некоторыми другими нашими публикациями об искусственном интеллекте:

• Что такое искусственный интеллект? Как работают арт-генераторы (2023)
• Как создавать искусственный интеллект в 2023 году (подробное руководство)
• ИИ персонажа: все, что вам нужно знать
• Как использовать генеративную заливку Photoshop AI в 2023 году (подробное руководство)

Рекомендованное изображение через whiteMocca/Shutterstock.com