4 нейросети, которые умеют создавать музыку

Что в итоге

В текстовом запросе можно прописать настроение и жанр или указать, о чем должна быть песня. Нейросеть понимает имена реальных музыкантов — например, сочинит песню в стиле Аврил Лавин. Правда, работает это не всегда, поскольку по идее так делать нельзя — голоса артистов защищены авторским правом.

Нейросеть для создания музыки работает по тому же принципу, что и ИИ для генерации картинок и текста. Сначала изучает и анализирует огромное число музыкальных композиций, затем пытается сделать похожие. Чем разнообразнее будут жанры и стили при обучении, тем больше вероятность, что нейросеть создаст абсолютно новое произведение. Искусственный интеллект пишет музыку двумя способами. Создает ноты. Такие ИИ больше подойдут профессиональным исполнителям. AI-генератор музыки пишет партитуру — последовательность нот и аккордов. Партитуру можно редактировать, добавлять звучания разных инструментов, менять аранжировку. Создает аудиосигнал. Такие алгоритмы умеют работать с голосом, динамикой и выразительностью музыкального произведения. Например, нейросеть для создания электронной музыки может упростить работу SMM-специалистов. Чтобы создать фоновую мелодию, песню со словами или новую композицию в конкретном стиле, не нужно изучать жанры и музыкальные инструменты или привлекать эксперта. Рассмотрим четыре нейросети для создания музыки онлайн. Все сервисы доступны без VPN.

Шаг 7. Выберите голос, который будет исполнять вашу песню. Для этого под заголовком Other Downloads (.zip) Step o.1 найдите поле model_url и добавьте туда ссылку на папку с моделью голоса. Ссылки можно взять из списка предложенных в этой же ячейке: Канье Вест, Кендрик Ламар, Дрейк.

Качество генерации: 🎵🎵🎵
Что умеет: генерировать инструментальную музыку по текстовому запросу или жанру
Лимиты: всего четыре бесплатных трека
Платные функции: больше кредитов от 9,99 $⁣ ( 878 ₽) в месяц, но российской картой оплатить нельзя

Качество генерации: 🎵🎵🎵🎵
Что умеет: перепевать песни голосами известных исполнителей или героев поп-культуры
Лимиты: три бесплатные генерации в час
Платные функции: больше генераций и голосов исполнителей от 9,99 $⁣ ( 878 ₽) в месяц, но российской картой оплатить нельзя

Шаг 4. Выберите один из предложенных голосов. На сайте доступны вокалы Арианы Гранде, Дрейка, Граймс, Канье Уэста, Трэвиса Скотта и других. Есть два персонажа мультфильмов — Губка Боб Квадратные Штаны и Питер Гриффин. При этом все эти голоса могут воспроизводить русскоязычный текст.

Как составить промт для создания музыки

Сервис сразу предлагает выбрать стиль композиции: электронная музыка, рэп, лоу-фай, грув или медитативная. В этих режимах повлиять на результат генерации невозможно: нейросеть создает случайный трек, подходящий под тематику. Но после генерации можно изменить инструменты и эффекты.

Качество генерации: 🎵🎵
Что умеет: генерировать инструментальную музыку по заданным параметрам
Лимиты: нет, но бесплатно треки скачать нельзя
Платные функции: 16,99 $⁣ ( 1493 ₽) за возможность скачивать треки и дополнительные функции, но российской картой оплатить нельзя

Стоимость. В версии Basic доступно 10 бесплатных треков в день, но их нельзя использовать в коммерческих целях. Для этого есть два платных тарифа: Pro — 10 долларов и 500 песен в месяц; Premier — 30 долларов и 2000 треков в месяц. В обоих случаях авторские права на созданную музыку принадлежат пользователю.

Media.io — сервис со множеством ИИ-функций, от улучшения качества фото до изменения голоса. Одна из них — генератор инструментальной музыки. Создавать песни можно по жанру — хип-хоп, рок, акустика, — настроению — счастливое, грустное, романтичное — или теме — реклама, трейлер, влог, занятия спортом. Либо написать текстовый запрос на английском языке.

Качество генерации: 🎵🎵🎵
Что умеет: генерировать инструментальную музыку по текстовому запросу или картинке
Лимиты: не более 30 минут в день, до 25 треков в месяц
Платные функции: больше генераций и возможность скачивать треки без потери качества от 14 $⁣ ( 1230 ₽) в месяц, но российской картой оплатить нельзя

Качество генерации: 🎵🎵🎵🎵🎵
Что умеет: генерировать песни с вокалом по текстовому запросу, редактировать треки
Лимиты: 50 кредитов хватает на пять попыток
Платные функции: больше кредитов от 10 $⁣ ( 878 ₽) в месяц, но российской картой оплатить нельзя

Musicfy позволяет генерировать треки гораздо проще: с коротким ожиданием, без запуска кода и возможности столкнуться с ошибками. С этим способом даже не требуется конвертировать аудиофайлы. Главный минус — на сайте представлен ограниченный набор голосов.

Вкладка Camera позволяет генерировать текст по картинке. Снимок можно сделать прямо из приложения. Нейросеть споет буквально о том, что изображено. Например, если сфотографировать натюрморт с фруктами и йогуртом, то нейропевец перечислит их и опишет вкус — и все это в рифму.

Кратко: какой способ выбрать

В Udio много возможностей повлиять на результат: как задавать изначальный промпт, так и редактировать получившуюся песню. Однако качество генерации на русском иногда хромает. Некоторые слова сливаются, получается каша. Но если разобраться в настройках, то можно добиться хорошего результата.

Вкладка Prompt сгенерирует и мелодию, и стихи по одному текстовому запросу. В нем я описала, о чем будет мой трек. Я пробовала указать Тейлор Свифт, но нейросеть отказывается генерировать голос конкретных артистов. Мне предложили альтернативный вариант: кантри-поп-певица и инди.

Качество генерации: 🎵🎵🎵🎵
Что умеет: накладывать эффекты, смешивать треки или создавать треки с нуля по заданным параметрам, редактировать их и генерировать музыку по текстовому запросу
Лимиты: бесплатно 25 треков до 30 секунд в месяц, но нельзя скачать
Платные функции: от 10 $⁣ ( 878 ₽) за 300 песен длительностью до 3,5 минуты в месяц, но российской картой оплатить нельзя

Лимиты жесткие: только два трека по текстовому запросу и два трека по жанру длительностью до 5 минут. Для своей задачи я выбрала жанр Acoustic, настроение Happy, тему Ads & Trailers. Продолжительность — 1 минута. Получилась приятная мелодия, которую можно использовать для рекламы или влога на «Ютубе».

Качество генерации: 🎵🎵
Что умеет: генерировать инструментальную музыку по заданным параметрам
Лимиты: 25 песен бесплатно, но их нельзя скачать
Платные функции: от 9,99 $⁣ ( 878 ₽) в месяц за бесконечное количество треков и возможность скачивать мелодии, но российской картой оплатить нельзя

Нейросеть из Google Colab позволяет сгенерировать трек сотней голосов, модели которых сделали пользователи. Этот способ затратен по времени: нужно ждать загрузки кода, часто он выдает ошибки. Разобраться в причинах с ходу сложно — сервис не говорит, в чем именно проблема. Порой приходится проводить время на форумах и «Ютубе», чтобы устранить ошибку — а через пять минут наткнуться уже на новую.