Нейросети для создания музыки

Нейросети для создания музыки

59069
4
Время чтения: 6 минут
Содержание
OkoCRM в Telegram
Подпишитесь на наш канал. Там полезные инструменты продаж и новости команды OkoCRM.
Перейти в канал OkoCRM

Искусственный интеллект добрался даже до творческих профессий и научился писать музыку. До Рахманинова или Моцарта ещё далеко, но ИИ уже умеет создавать треки для видео, которые не нарушают авторское право. Я собрала топ нейросетей для создания музыки, протестировала их и покажу, что они умеют.

Что такое ИИ-генерация музыки

Компании обучают нейросети создавать мелодии, пропуская через них тысячи песен в разных жанрах. Искусственный интеллект обучают распознавать настроение, темп, жанр мелодий, а затем по настройкам создавать новые треки.

Чаще всего создание музыки с помощью нейросети происходит на основе песен, которые загружены в библиотеку этой нейросети. Иногда можно добавить свои любимые треки или дать задание текстом: описать, какой должна быть мелодия. Ещё реже ИИ пишет музыку по изображению (!!!).

Некоторые нейросети пишут ноты, другие создают композицию с вокалом и кучей музыкальных инструментов. Готовую мелодию можно редактировать, но не всегда — у каждой нейросети по-разному.

Сейчас не только зарубежные компании разрабатывают ИИ для создания треков. Есть нейросети для создания музыки онлайн на русском языке от отечественных разработчиков, например, «Маэстро» от Сбера.

1. AIVA

Сайт: https://aiva.ai/

Сложность использования: ❌❌

Результат: мелодия

Стоимость: от 11 €

С помощью этой нейросети можно сгенерировать саундтрек к видео, который не будет нарушать авторские права. Есть бесплатная версия, но в ней авторские права принадлежат AIVA. Чтобы получить авторские права на музыку, надо купить тариф за 33 €.

Принцип работы

После регистрации пользователь попадает в личный кабинет, куда можно загрузить любимые треки, чтобы ИИ опирался на них при создании композиций. AIVA — нейросеть для создания ремиксов музыки и оригинальных мелодий. Тут всё зависит от желания пользователя.

Чтобы добавить треки, выбираем «Influences» → «Create» → «Influence» и перетаскиваем нужный файл прямо в окно браузера. Когда файл загрузится, нажимаем на плюсик на самом файле. Откроется окно настроек, в котором надо выбрать музыкальное направление, эмоцию и другие настройки композиции.

Тут можно создать от 1 до 5 треков за один раз.

Три новых мелодии AIVA создаёт за пару минут. Дальше их можно редактировать. Кликаем правой клавишей мыши и выбираем «Open in Editor».

Есть редактор сгенерированных мелодий, но часть функций доступна только в программе, которую можно скачать на ПК.

В редакторе можно добавить новый слой инструментов, настроить темп мелодии, изменить аккорды.

Преимущества и недостатки

➕Быстро генерирует музыку.

➕Очень много настроек.

➖На бесплатном тарифе можно скачать только 3 мелодии в месяц.

➖Большая часть функции доступны не в браузере, а в приложении.

2. Soundful

Сайт: https://soundful.com/

Сложность использования:

Результат: мелодия

Стоимость: от 7,42 $

Soundful генерирует музыку вообще без вмешательства пользователя, буквально в один клик. На бесплатном тарифе есть ограничения — можно создать только 10 треков и их нельзя скачать, только поделиться ссылкой.

Принцип работы

Нужно зарегистрироваться или войти в аккаунт Google. У меня не получалось несколько раз, были проблемы с капчей, поэтому зашла с телефона через VPN — всё заработало. Выбираем любимые жанры, скорость, ключ → сервис генерирует музыку.

Пару кликов и трек готов, причём с минимальным вмешательством.

Преимущества и недостатки

➕Создаёт полноценные треки.

➕Не нужно ничего настраивать, ИИ сделает всё сам.

➖Скачать трек нельзя, можно только поделиться ссылкой.

3. Soundraw

Сайт: https://soundraw.io/create_music

Сложность использования:

Результат: мелодия

Стоимость: от 16,99 $

В Soundraw можно создавать неограниченное количество мелодий даже на бесплатном тарифе. Только их нельзя скачать и использовать для видеороликов.

Принцип работы

Нейросеть генерирует музыку даже без регистрации. Нужно выбрать длительность трека, темп и настроение → Soundraw создаст 15 мелодий на выбор. Дальше их можно настраивать: менять темп, инструменты, объём. Готовые треки можно не только редактировать, но и генерировать по ним похожие.

Сгенерировать музыку просто — ИИ использует библиотеку мелодий и сам создаёт треки. Есть редактор готовых мелодий.

Преимущества и недостатки

➕Быстро создаёт треки.

➕Много возможностей для настройки мелодий.

➖Чтобы скачать трек, нужно купить платный тариф.

4. Imaginary Soundscape

Сайт: https://imaginarysoundscape.net/

Сложность использования:

Результат: мелодия

Стоимость: бесплатно

Imaginary Soundscape — необычная нейросеть для создания музыки, она генерирует мелодии по картинке.

Принцип работы

Нужно загрузить фото и ИИ напишет для него музыку. Я загрузила вот такую картинку с волшебным лесом и оленем, результат можно прослушать выше.

Здесь нельзя настроить готовую мелодию.

ИИ распознаёт изображение на фото и подбирает для него звук из библиотеки. Мне настолько понравился результат, что я попробовала ещё несколько картинок.

Мелодия для гор. Нейросеть подобрала щебетание птиц.

Мелодия для «Звёздных войн». ИИ не смог определить фильм, но, судя по крикам чаек, нашёл на картинке море.

Мелодия для картины «Звёздная ночь». У меня такой перезвон ассоциируется с Рождеством, а у нейросети — с этой картиной Ван Гога.

Imaginary Soundscape не всегда справляется со своей задачей — только если сумеет распознать картинку. Поэтому если нужна мелодия к игре или видео лучше добавлять что-то понятное. Не сцену из фильма, а картинку, которая подходит по настроению: лес, звёзды или снимок Марса.

Преимущества и недостатки

➕Быстро генерирует музыку.

➕Не нужно ничего настраивать, ИИ сделает всё сам.

➖Скачать треки нельзя.

➖Нейросеть не всегда удачно генерирует мелодию.

Подпишитесь на Telegram OkoCRM
Новости команды OkoCRM, обновления в системе, полезные инструменты для продаж.
Перейти в канал OkoCRM

5. MuseNet

Сайт: https://openai.com/research/musenet

Сложность использования:

Результат: мелодия

Стоимость: бесплатно

MuseNet — генератор музыки, который разработала компания Open AI. Ещё один известный продукт компании — нейросеть ChatGPT, которая пишет тексты.

Принцип работы

Расскажу, как пользоваться нейросетью для создания музыки. На сайте нужно выбрать в каком стиле должна быть мелодия. На выбор есть 6 вариантов: Моцарт, Шопен, Рахманинов, Леди Гага, кантри или дисней. Ещё можно выбрать конкретное произведение, на которое будет опираться ИИ. Тут тоже скромный набор: по одной песне Адель и Леди Гаги, два произведения Бетховена и одно Моцарта.

MuseNet сгенерирует 4 варианта мелодии, все они будут в стиле Леди Гаги. А можно создать что-то в стиле Гаги и Моцарта, тут как захочешь.

Треки получаются однотипными, здесь мало разнообразия. Единственный плюс — их можно скачать бесплатно.

У OpenAI есть похожий сервис для генерации музыки — Jukebox, он обучен на 1,2 млн песен, поэтому создаёт настоящие глубокие треки. В библиотеке можно послушать треки, которые генерирует Jukebox.

Преимущества и недостатки

➕Быстро генерирует музыку.

➕Минимум настроек.

➕Можно скачать трек.

➖Мелодии получаются однотипными.

6. Melobytes

Сайт: https://melobytes.com/en/app/melobytes-pro

Сложность использования: ❌❌❌

Результат: мелодия

Стоимость: от 9,90 €

Melobytes умеет не только создавать музыку, сервис добавляет вокал. Такие функции доступны в профессиональной версии приложения после регистрации. Есть обычный режим, в котором намного меньше настроек и проще сгенерировать музыку.

Принцип работы

Нужно настроить темп, добавить инструменты, вокал → Melobytes сгенерирует мелодию.


Настроек тут очень много, разберётся только профи.

Я ничего не меняла, оставила стандартные настройки, только добавила текст песни. Местами получилась какофония и вокал тоже не очень приятный.

На сайте Melobytes мелодию можно скачать, а ещё ИИ напишет к ней ноты. В бесплатном режиме после регистрации у пользователя есть 5 попыток в день, чтобы создать трек.

Преимущества и недостатки

➕ Много настроек для профессиональных музыкантов.

➕Готовый трек можно скачать и в бесплатной версии.

➕ИИ создаёт музыку и вокал.

➖Результат не всегда радует.

7. MusicLM

Сайт: https://google-research.github.io/seanet/musiclm/examples/

Сложность использования:

Результат: мелодия

Стоимость: нейросеть не доступна пользователям

MusicLM — нейросеть, которую разработали в компании Google, но пока жадничают и не дают нам ею пользоваться.

Принцип работы

MusicLM генерирует музыку по текстовому описанию. Для этого через нейросеть прогнали сотни тысяч треков и научили ее распознавать настроение песен.

Пока сгенерировать треки здесь нельзя, можно только послушать, что умеет создавать MusicLM.

У нейросети есть одна проблема: 1% сгенерированных треков — просто повтор мелодий для обучения. Поэтому пока сервис дорабатывают и не открывают доступ для всех желающих.

Преимущества и недостатки

➕Хороший результат, если судить по библиотеке.

➖Иногда MusicLM создаёт плагиат.

➖Пока сервис недоступен для пользователей.

Подытожим

Нейросети уже неплохо справляются с созданием музыки. Вот 3 крутых сервиса, которые работают лучше всего:

AIVA — генерирует композиции по загруженным трекам или мелодиям в библиотеке.

Soundful — создаёт музыку по жанровым предпочтениям пользователя.

Imaginary Soundscape — озвучивает картинки, не без ошибок, но с простыми изображениями справляется.

Новости OkoCRM в Telegram
Узнавайте первым про обновления и полезные инструменты продаж. Учим, как надо работать в системе. Собираем фидбек и делимся новостями.
Канал OkoCRM
Получайте статьи почтой. Самое важное и дважды в месяц. Иногда смешно, но не сильно
Наверх
Мы используем cookie для вашего удобства. Используя сайт, вы соглашаетесь с этим. Подробнее - в политике конфиденциальности.
Я согласен