Искусственный интеллект добрался даже до творческих профессий и научился писать музыку. До Рахманинова или Моцарта ещё далеко, но ИИ уже умеет создавать треки для видео, которые не нарушают авторское право. Я собрала топ нейросетей для создания музыки, протестировала их и покажу, что они умеют.
Что такое ИИ-генерация музыки
Компании обучают нейросети создавать мелодии, пропуская через них тысячи песен в разных жанрах. Искусственный интеллект обучают распознавать настроение, темп, жанр мелодий, а затем по настройкам создавать новые треки.
Чаще всего создание музыки с помощью нейросети происходит на основе песен, которые загружены в библиотеку этой нейросети. Иногда можно добавить свои любимые треки или дать задание текстом: описать, какой должна быть мелодия. Ещё реже ИИ пишет музыку по изображению (!!!).
Некоторые нейросети пишут ноты, другие создают композицию с вокалом и кучей музыкальных инструментов. Готовую мелодию можно редактировать, но не всегда — у каждой нейросети по-разному.
Сейчас не только зарубежные компании разрабатывают ИИ для создания треков. Есть нейросети для создания музыки онлайн на русском языке от отечественных разработчиков, например, «Маэстро» от Сбера.
1. AIVA
Сайт: https://aiva.ai/
Сложность использования: ❌❌
Результат: мелодия
Стоимость: от 11 €
С помощью этой нейросети можно сгенерировать саундтрек к видео, который не будет нарушать авторские права. Есть бесплатная версия, но в ней авторские права принадлежат AIVA. Чтобы получить авторские права на музыку, надо купить тариф за 33 €.
Принцип работы
После регистрации пользователь попадает в личный кабинет, куда можно загрузить любимые треки, чтобы ИИ опирался на них при создании композиций. AIVA — нейросеть для создания ремиксов музыки и оригинальных мелодий. Тут всё зависит от желания пользователя.
Чтобы добавить треки, выбираем «Influences» → «Create» → «Influence» и перетаскиваем нужный файл прямо в окно браузера. Когда файл загрузится, нажимаем на плюсик на самом файле. Откроется окно настроек, в котором надо выбрать музыкальное направление, эмоцию и другие настройки композиции.
Тут можно создать от 1 до 5 треков за один раз.
Три новых мелодии AIVA создаёт за пару минут. Дальше их можно редактировать. Кликаем правой клавишей мыши и выбираем «Open in Editor».
Есть редактор сгенерированных мелодий, но часть функций доступна только в программе, которую можно скачать на ПК.
В редакторе можно добавить новый слой инструментов, настроить темп мелодии, изменить аккорды.
Преимущества и недостатки
➕Быстро генерирует музыку.
➕Очень много настроек.
➖На бесплатном тарифе можно скачать только 3 мелодии в месяц.
➖Большая часть функции доступны не в браузере, а в приложении.
2. Soundful
Сайт: https://soundful.com/
Сложность использования: ❌
Результат: мелодия
Стоимость: от 7,42 $
Soundful генерирует музыку вообще без вмешательства пользователя, буквально в один клик. На бесплатном тарифе есть ограничения — можно создать только 10 треков и их нельзя скачать, только поделиться ссылкой.
Принцип работы
Нужно зарегистрироваться или войти в аккаунт Google. У меня не получалось несколько раз, были проблемы с капчей, поэтому зашла с телефона через VPN — всё заработало. Выбираем любимые жанры, скорость, ключ → сервис генерирует музыку.
Пару кликов и трек готов, причём с минимальным вмешательством.
Преимущества и недостатки
➕Создаёт полноценные треки.
➕Не нужно ничего настраивать, ИИ сделает всё сам.
➖Скачать трек нельзя, можно только поделиться ссылкой.
3. Soundraw
Сайт: https://soundraw.io/create_music
Сложность использования: ❌
Результат: мелодия
Стоимость: от 16,99 $
В Soundraw можно создавать неограниченное количество мелодий даже на бесплатном тарифе. Только их нельзя скачать и использовать для видеороликов.
Принцип работы
Нейросеть генерирует музыку даже без регистрации. Нужно выбрать длительность трека, темп и настроение → Soundraw создаст 15 мелодий на выбор. Дальше их можно настраивать: менять темп, инструменты, объём. Готовые треки можно не только редактировать, но и генерировать по ним похожие.
Сгенерировать музыку просто — ИИ использует библиотеку мелодий и сам создаёт треки. Есть редактор готовых мелодий.
Преимущества и недостатки
➕Быстро создаёт треки.
➕Много возможностей для настройки мелодий.
➖Чтобы скачать трек, нужно купить платный тариф.
4. Imaginary Soundscape
Сайт: https://imaginarysoundscape.net/
Сложность использования: ❌
Результат: мелодия
Стоимость: бесплатно
Imaginary Soundscape — необычная нейросеть для создания музыки, она генерирует мелодии по картинке.
Принцип работы
Нужно загрузить фото и ИИ напишет для него музыку. Я загрузила вот такую картинку с волшебным лесом и оленем, результат можно прослушать выше.
Здесь нельзя настроить готовую мелодию.
ИИ распознаёт изображение на фото и подбирает для него звук из библиотеки. Мне настолько понравился результат, что я попробовала ещё несколько картинок.
Мелодия для гор. Нейросеть подобрала щебетание птиц.
Мелодия для «Звёздных войн». ИИ не смог определить фильм, но, судя по крикам чаек, нашёл на картинке море.
Мелодия для картины «Звёздная ночь». У меня такой перезвон ассоциируется с Рождеством, а у нейросети — с этой картиной Ван Гога.
Imaginary Soundscape не всегда справляется со своей задачей — только если сумеет распознать картинку. Поэтому если нужна мелодия к игре или видео лучше добавлять что-то понятное. Не сцену из фильма, а картинку, которая подходит по настроению: лес, звёзды или снимок Марса.
Преимущества и недостатки
➕Быстро генерирует музыку.
➕Не нужно ничего настраивать, ИИ сделает всё сам.
➖Скачать треки нельзя.
➖Нейросеть не всегда удачно генерирует мелодию.
5. MuseNet
Сайт: https://openai.com/research/musenet
Сложность использования: ❌
Результат: мелодия
Стоимость: бесплатно
MuseNet — генератор музыки, который разработала компания Open AI. Ещё один известный продукт компании — нейросеть ChatGPT, которая пишет тексты.
Принцип работы
Расскажу, как пользоваться нейросетью для создания музыки. На сайте нужно выбрать в каком стиле должна быть мелодия. На выбор есть 6 вариантов: Моцарт, Шопен, Рахманинов, Леди Гага, кантри или дисней. Ещё можно выбрать конкретное произведение, на которое будет опираться ИИ. Тут тоже скромный набор: по одной песне Адель и Леди Гаги, два произведения Бетховена и одно Моцарта.
MuseNet сгенерирует 4 варианта мелодии, все они будут в стиле Леди Гаги. А можно создать что-то в стиле Гаги и Моцарта, тут как захочешь.
Треки получаются однотипными, здесь мало разнообразия. Единственный плюс — их можно скачать бесплатно.
Преимущества и недостатки
➕Быстро генерирует музыку.
➕Минимум настроек.
➕Можно скачать трек.
➖Мелодии получаются однотипными.
6. Melobytes
Сайт: https://melobytes.com/en/app/melobytes-pro
Сложность использования: ❌❌❌
Результат: мелодия
Стоимость: от 9,90 €
Melobytes умеет не только создавать музыку, сервис добавляет вокал. Такие функции доступны в профессиональной версии приложения после регистрации. Есть обычный режим, в котором намного меньше настроек и проще сгенерировать музыку.
Принцип работы
Нужно настроить темп, добавить инструменты, вокал → Melobytes сгенерирует мелодию.
Настроек тут очень много, разберётся только профи.
Я ничего не меняла, оставила стандартные настройки, только добавила текст песни. Местами получилась какофония и вокал тоже не очень приятный.
На сайте Melobytes мелодию можно скачать, а ещё ИИ напишет к ней ноты. В бесплатном режиме после регистрации у пользователя есть 5 попыток в день, чтобы создать трек.
Преимущества и недостатки
➕ Много настроек для профессиональных музыкантов.
➕Готовый трек можно скачать и в бесплатной версии.
➕ИИ создаёт музыку и вокал.
➖Результат не всегда радует.
7. MusicLM
Сайт: https://google-research.github.io/seanet/musiclm/examples/
Сложность использования: ❌
Результат: мелодия
Стоимость: нейросеть не доступна пользователям
MusicLM — нейросеть, которую разработали в компании Google, но пока жадничают и не дают нам ею пользоваться.
Принцип работы
MusicLM генерирует музыку по текстовому описанию. Для этого через нейросеть прогнали сотни тысяч треков и научили ее распознавать настроение песен.
Пока сгенерировать треки здесь нельзя, можно только послушать, что умеет создавать MusicLM.
У нейросети есть одна проблема: 1% сгенерированных треков — просто повтор мелодий для обучения. Поэтому пока сервис дорабатывают и не открывают доступ для всех желающих.
Преимущества и недостатки
➕Хороший результат, если судить по библиотеке.
➖Иногда MusicLM создаёт плагиат.
➖Пока сервис недоступен для пользователей.
Подытожим
Нейросети уже неплохо справляются с созданием музыки. Вот 3 крутых сервиса, которые работают лучше всего:
AIVA — генерирует композиции по загруженным трекам или мелодиям в библиотеке.
Soundful — создаёт музыку по жанровым предпочтениям пользователя.
Imaginary Soundscape — озвучивает картинки, не без ошибок, но с простыми изображениями справляется.
