8 нейросетей для создания музыки

Искусственный интеллект помогает тысячам пользователей в различных креативных задачах: создании изображений, написании текстов, переводе текстов, написании кода, создании дипфейков, разработке контент-плана, изучении языков. Есть еще одна задача — создание музыки. Да, ИИ этим тоже занимаются, причем неплохо. 

[banner1

В данной статье поговорим о том, какие существуют нейросети для генерации музыки онлайн и смогут ли технологии AI заменить композиторов и вокалистов.

Нейросети, создающие музыку по описанию и ключевым словам

Первая группа ИИ связана с созданием музыки по текстовому описанию. Они справляются с несколькими задачами: создают собственные треки по ключевым словам, меняют голоса, удаляют помехи, обрезают аудио и так далее. 

RIFFUSION

RIFFUSION — бесплатная программа, производящая музыкальную композицию по текстовому запросу.

Преимущества нейросети:

• Простота в использовании и удобный интерфейс;
• Сочетание различных жанров и стилей;
• Возможность генерации случайных мелодий;
• Способность программы создать музыку под нестандартный запрос.

Недостатки:

Пользователи отмечают, что программа часто выдает неподходящие результаты. 

Soundraw

Soundraw — также создает композицию с помощью определенных слов и имеет расширенные настройки.

Среди преимуществ:

• Программа может задавать жанр;
• Предлагает много вариантов, которые потом можно доработать;
• Простой алгоритм действий;
• Есть лицензия на скачанные песни;
• Имеется бесплатная версия.

Среди минусов:

Скачать бесплатно мелодию не получится, нужно покупать платную подписку. Она стоит $17 в месяц.

Mubert 

Mubert — платформа, которая позволяет сгенерировать мелодию с помощью текста на английском языке. 

Среди преимуществ:

• Имеет два варианта создания композиции: с помощью выбора жанра, стиля и настроения/ текстового описания;
• Может создавать ремиксы;
• Генерирует несколько мелодий одновременно;
• Можно работать без регистрации.

Минусы:

• Работа с запросами возможна только на английском;
• В бесплатной версии указывается авторство платформы;
• Можно создать не более 25 треков в месяц без покупки тарифов.

Нейросети, генерирующие музыку по картинкам

Второй вид нейросетей умеет создавать музыку с помощью фотографий. Рассмотрим несколько таких программ и принцип их работы.

Imaginary Soundscape

Imaginary Soundscape — приложение  для создания звуков природы, придуманная в Японии. Если загрузить в алгоритм фотографию медведя, то программа воссоздаст звук зверя, а в качестве фона будет использовать шум деревьев и ручейка.

Преимущества:

• Бесплатная работа нейросети;
• Возможность использовать получившиеся треки для медитаций и релаксации;
• В арсенале есть большая библиотека звуков.

Из минусов:

• Сервис не подходит для обработки музыки;
• Сохранить трек можно только с помощью аудиоредактора.

Механизм работы:

Алгоритм работает просто: необходимо загрузить изображение формата PNG или JPG размером до 5 Мб или вставить в специальное поле ссылку на фото. После чего нужно нажать кнопку Submit. Для генерации звука потребуется лишь несколько секунд. 

CLIP Interrogator

CLIP Interrogator — инструмент, созданный для связи изображения с музыкой. Он определяет наиболее важные для трека элементы картинки и генерирует музыку на основе текстовых подсказок.

Из плюсов:

• Можно работать бесплатно;
• Сервис выдает приблизительное описание вашей картинки, чтобы точнее создать трек.

Недостатки:

• Сервис работает медленно;
• Полученную композицию нельзя скачать.

Нейросети для генерации музыки случайным образом

Существуют алгоритмы, которые могут создать музыку без описания, основываясь на загруженные миллионами пользователей различные файлы. Рассмотрим некоторые из них.

Soundraw

Soundraw — инструмент, позволяющий создать музыку под любое настроение.

Преимущества:

• Позволяет выбрать темп, жанр, стиль, настроение, длительность и инструменты;
• Можно самостоятельно менять тональность и ритм в получившейся композиции.

Недостатки:

• Нет возможности использовать текстовые запросы. Алгоритм создает музыку с помощью обработки уже имеющихся композиций в базе сервиса. 

Boomy

Boomy — сервис генерации, позволяющий создать трек случайным образом за несколько секунд.

ИИ помогает создать трек на основе выбранных жанра, тональности и аккордов. Композицию можно редактировать: менять громкость, добавлять к ней всевозможные эффекты и пр.

Плюсы:

• Композиции звучат без помех;
• Трек можно размещать на разных площадках для монетизации;
• Можно добавлять к музыке вокал;
• ИИ работает быстро, в течение нескольких секунд.

Из минусов:

• Программа платная, имеет три тарифа.

Ecrett Music

Ecrett Music — ИИ для генерации музыки с удобным интерфейсом и гидом, объясняющим принципы работы.

Преимущества:

• Позволяет редактировать результат;
• Есть возможность выбрать разные параметры для составления трека.
• Можно скачать на устройство.

Недостатки:

• Бесплатный период есть только в пробном формате.

Особенности:

Этот генератор часто используют для создания саундтреков к видеоролику. В нем можно выбрать формат сцены, в которой будет использована мелодия: путешествие, встреча, и пр. Поэтому для работы алгоритма в систему необходимо загружать видео и выбирать нужный сценарий.

Примеры музыки, написанной с помощью искусственного интеллекта

Трек Heart of my Sleeve на платформе Spotify в апреле этого года набрал более миллиона прослушиваний. Многие пользователи думали, что композицию исполняли The Weekend и Дрейк, однако ее загрузил пользователь ghostwtitter977 и она была создана с помощью ИИ, как выяснилось позднее. Песня была удалена.

С помощью нейросети были также созданы такие композиции, как Imagine Dragons голосом Фредди Меркьюри, Just The Two of Us голосом Канье Уэста. В России обрели популярность ИИ-каверы на песни Моргенштерна, Доры и Элджея. 

Есть примеры и с классикой. Открытие конференции Яндекс в 2017 году сопровождалось музыкой в стиле композитора Скрябина, которую исполняет камерный оркестр. Создана она была с помощью искусственного интеллекта, а точнее — программистов, обучающим нейросеть по произведениям великих классиков. 

Да, такие треки легко расходятся в Сети и, возможно, очень быстро набирают популярность. Однако смогут ли они стать полноценными игроками музыкального рынка — вот вопрос. 

Сможет ли AI заменить музыкантов и вокалистов

По мнению некоторых пользователей Рунета, нейросеть не способна быть настоящей заменой реальных творцов, однако может помочь в творческом процессе. 

Есть специальные платформы, построенные на принципах ИИ, придуманные специально для создания демоверсий. Например, программа ORB Composer позволяет сгенерировать музыку на основе имеющихся у композитора идей и помочь подобрать правильную тональность и другие фишки.

Заключение 

В любом случае, для того, чтобы успешно получившиеся композиции вышли в свет, человеку нужно потрудиться над обработкой и редактированием аудио дорожки, получившейся на выходе. 

Этим может заняться разве что профессионал, знающий толк в музыке. Ритм, тональность, вокал, громкость и другие всевозможные эффекты не могут получиться идеальными — все это требует доработки.

В статье мы привели примеры качественных программ для создания музыки. Они могут стать помощником и работать с вами, учитывая разные запросы.