Нейросети стремительно интегрировались во все креативные индустрии. Они освоили даже такие сложные процессы, как создание видео или написание музыки. На рынке можно найти нейросеть для создания музыки под любой бюджет и требования. Теперь записать целый альбом за неделю — не безумие, а вопрос правильного промпта и выбранной модели ИИ. Рассказываем, как работают такие нейросети.
Как нейросети создают музыку
Даже самый гениальный AI не может создавать музыкальные композиции из пустоты. В этом его отличие от человека. Поэтому перед тем, как использовать ИИ, его нужно обучить и проверить в действии.
Принцип работы ИИ-генераторов музыки
Первый этап подготовки не отличается от нейросетей для написания текстов или иллюстраций. Это загрузка обучающей информации — основы всех знаний ИИ. Это тексты и музыка. При анализе пары текст-музыка ИИ выделяет и запоминает паттерны создания песен — всё как у людей при обучении игре на музыкальном инструменте.
Можно выделить два больших направления, по которым происходит генерация музыки: создание нот, аккордов и текстов или же сразу запись готового аудиофайла. Существуют нейросети, которые могут добавить вокал с учётом ритма мелодии или текста, структуры песни и её интонации.
Сейчас существуют три основных типа генеративных моделей, которые могут создавать мелодии и тексты песен:
- Рекуррентные нейронные сети (RNN). Они предназначены для обработки последовательных данных, например, текстов. Благодаря этому RNN могут «запоминать» информацию из предыдущих циклов обработки. Поэтому они хорошо справляются с написанием мелодий и ритмических паттернов, но плохо справляются с объёмными контекстами и длинными зависимостями.
- Трансформеры. Следующий этап развития RNN. Они также работают с последовательностями, но не нуждаются в их обработке по порядку. То есть, текст эта модель может изучить без обработки его финального абзаца. Это ускоряет процесс обучения и работы с данными. Самый известный пример этой модели — ChatGPT.
- Генеративно-состязательные сети (GAN). Эта модель представляет собой две соревнующиеся нейросети — генератора и дискриминатора. Одна из них генерирует данные, а вторая оценивает их правдоподобность. Чаще всего такой вариант используют для генерации визуальных материалов: фото или видео. Также GAN может пригодиться при работе с звуковыми фрагментами.
Конечный результат во многом зависит не только от сервиса генерации, но и от используемых промптов — для некоторых сервисов лучше использовать английский язык, запросы на русском они не понимают.
С какими жанрами и стилями можно работать
Лимитов здесь в целом нет. Способности любой из моделей ограничены только редкостью выбранного направления и массивом данных, на которых её обучали. Например, если вы решите поэкспериментировать с редкими жанрами, то, возможно, вам придётся потратить некоторое время на написание более подробного промпта или поиск примеров.
Как написать текст для песни с помощью ИИ
Часто создание песни начинается с фразы, вокруг которой формируется текст, или идеи для трека. Процесс написания текстов может стать намного проще и приятнее, если использовать ИИ и подходящие промпты. Разберёмся, как можно написать трек и подобрать идеи аранжировки в одной нейросети.
Получить доступ к возможностям популярных нейронок легко с помощью Chad AI. Сервис предоставляет широкий набор опций по генерации текста и даже может помочь при создании композиции. В бесплатной версии доступно семь запросов в день при работе с моделями GPT-4o Mini и Claude 3 Haiku. Также можно использовать шаблоны промптов.
Есть удобная сетка тарифов, которые можно оплатить и продлевать с российской карты: «Мини», «Опти», «Плюс» и «Про». Первый позволяет генерировать в GPT-4o Mini до 189 страниц текста — это 120 тысяч слов в месяц. Можно использовать ИИ для создания изображений: например, сделать обложку для сингла или альбома помогут Midjourney и DALL·E 3.
Остальные тарифы различаются только доступным количеством слов: от 300 тысяч в месяц в «Опти» до 1,2 миллиона слов для «Про». Стоимость платных подписок составляет от 290 рублей в месяц.
Попробуем сгенерировать песню и придумать для неё подходящую структуру композиции вместе с Chad AI. После регистрации заходим в меню нового чата.
Мы можем написать промпт самостоятельно или поискать подходящий шаблон в библиотеке сервиса. Есть шаблон для рэп-исполнителей, попробуем его.
Выбираем промпт, задаём тему и смотрим, как создаётся текст.
Основа неплохая, но требует небольших корректировок: например, ИИ использовал несуществующие слова «долгожданье» и «иябрьский». Попробуем придумать сразу варианты мелодий и аранжировки для будущей песни.
Ещё нейросеть может подготовить запрос для создания музыки.
Теперь мы можем использовать полученный текст и идеи композиции для дальнейшей работы над треком. Например, использовать ИИ, чтобы написать мелодию и свести полноценную песню.
6 нейросетей для генерации музыки
Все ИИ-сервисы для работы с музыкой делятся на две категории: треки без текста и полноценные песни с текстом. Их применение ограничено только фантазией и запросом пользователя и возможностями выбранного тарифа. Разберём несколько интересных вариантов.
Для готовых треков без текста: Soundraw, AIVA, Boomy, Soundful
Если хотите создать уникальный саундтрек, фоновую мелодию или бит без слов, эти нейросети помогут сгенерировать готовые треки в разных жанрах.
Soundraw
Что умеет: позволяет сгенерировать музыку более чем в 30 жанрах. Также в меню настройки можно выбрать одно из 20+ настроений, указать тему (к примеру, влог или корпоратив) и продолжительность трека в секундах. Дополнительно есть настройки темпа — медленный, нормальный и быстрый, и используемых музыкальных инструментов.
Платные подписчики, в зависимости от тарифа, могут загружать от 10 до неограниченного количества треков и скачивать их в форматах mp3, WAV (формат хранения записи аудио с возможностью редактирования в любом подходящем приложении) и stems (формат, при котором трек раскладывается на отдельные дорожки). Также можно использовать мелодии в коммерческих целях, монетизировать и применять их как фоновую музыку.
Сколько стоит: у Soundraw обширная тарифная сетка, которую можно разделить на две категории — для отдельных авторов и компаний до 10 человек или для компаний от 10 человек. Первая категория делится на две группы: создатели контента или музыканты и продюсеры. Для них предусмотрено четыре тарифа от 16,99 до 49,99 долларов в месяц в зависимости от нужных опций. Стоимость тарифа для компаний от 10 человек уточняется отдельно.
AIVA
Что умеет: создаёт треки по нескольким сценариям — по стилю, по аккордовой последовательности, из загружаемого файла или шаг за шагом. Также пользователи могут слушать радио по различным стилям или пройти обучение по созданию треков.
Для бесплатных аккаунтов: до трёх загрузок в месяц, продолжительность трека до 3 минут, скачивание в формате mp3 и MIDI. Авторские права остаются у сервиса (его надо указывать среди создателей), нет монетизации.
Для аккаунтов со стандартным тарифом доступно до 15 загрузок в месяц, продолжительность треков ограничена 5 минутами, скачивание файлов также в формате mp3 и MIDI. Авторские права всё ещё остаются у AIVA, но сервис не нужно указывать в списке создателей, а также есть ограниченная монетизация.
Для аккаунтов с профессиональным тарифом доступно до 300 загрузок в месяц, ограничение на продолжительность треков — 5 минут и 30 секунд. Можно скачивать файлы в любом формате, при этом доступен экспорт WAV-файлов в высоком качестве. Все авторские права принадлежат владельцу аккаунта, сервис не указывается в списке создателей, есть полная монетизация.
Сколько стоит: подписка по стандартному тарифу при оплате на год обойдётся в 11 евро в месяц, по профессиональному — 33 евро. При помесячной оплате — 15 и 49 евро соответственно. НДС оплачивается отдельно.
Boomy
Что умеет: эта нейросеть для музыки позволяет создавать мелодии в выбранных жанрах или в пользовательском режиме. В нём можно выбрать стиль, музыкальные инструменты, звуковые эффекты, темп, тип микширования и применения ударных. Все настраиваемые параметры можно прослушать.
В базовом тарифе можно создавать и редактировать треки, при этом есть доступ только до базовых инструментов изменения треков. Можно сохранять до 25 песен, но нет опции загрузки получившихся произведений.
В тарифе Creator расширены возможности редактирования треков, можно сохранять до 500 песен. В месяц можно загружать до 25 треков в формате WAV.
Для подписчиков уровня PRO доступен весь функционал по редактированию песен. При этом количество сохранённых песен не ограничено, а в формате WAV можно сохранять до 250 треков.
В тарифах Creator и PRO пользователи получают полные коммерческие права: авторское право, монетизацию и распространение на стриминговых платформах (DSP).
Сколько стоит: тариф Creator — 14,99 долларов в месяц, тариф PRO — 39,99 долларов в месяц.
Soundful
При регистрации пользователю предложат выбрать одну из ролей для кастомизации функционала: продюсер, певец, рэпер, DJ, инфлюенсер, создатель контента для социальных сетей или видео, бизнесмен. Можно указать и предпочитаемые жанры.
Что умеет: этот сервис силён в создании приятной фоновой музыки без слов. Создание треков производится по жанрам. Можно выбрать скорость музыки, громкость и минорное или мажорное исполнение. В бесплатной версии нет ограничений по генерации треков. Всего доступно более 25 жанров и возможность загрузки одного файла в формате MP3 в месяц.
Несмотря на широкую бесплатную функциональность, у нейросети есть и платные версии. Так, в Premium появляется лицензия создателя музыки и премиум-контент, а также доступ к 150 жанрам и загрузка 100 файлов в формате MP3 и WAV в месяц. В тарифе PRO количество загрузок увеличивается до 400, появляется функция загрузки stem-файлов.
Сколько стоит: тариф Premium— 5 долларов в месяц. Тариф PRO — 9,99 долларов в месяц при оплате сразу за год,14,99 долларов при помесячной оплате.
Для создания песен с текстом: Suno, Udio
Хотите создать настоящий хит, но нет вдохновения? Современные ИИ-сервисы могут не только придумать мелодию, но и написать текст за вас.
Suno
Что умеет: это полноценная нейросеть для песен, она способна создавать и музыку, и тексты. Можно выбрать предпочитаемые жанры из списка тегов или исключить неподходящие, применить авторежим для создания текста или добавить уже готовый материал.
Важно учитывать, что Suno может сгенерировать текст песен на том же языке, на котором написан промпт. Поэтому лучше писать запросы или на требуемом языке, или на английском.
В бесплатном тарифе доступна версия нейросети версии 3.5, каждый день добавляется 50 кредитов для оплаты генерации песен — это около 10 песен в сутки. Также можно загружать аудио длиной до 1 минуты. Очередь на создание треков общая, при этом нет возможности покупки дополнительных кредитов, а также запрещено коммерческое использование.
Для пользователей с тарифом PRO доступна последняя версия Suno — 4.5 с ранним доступом к новым функциям. Каждый месяц начисляются 2500 кредитов, которых хватит на создание примерно 500 песен. Расширенные функции и деление треков до 12 дорожек (вокал и инструменты). Загрузка аудио продолжительностью до 8 минут. Коммерческие права на созданные песни переходят к пользователям. Также есть приоритетная очередь создания и возможность покупать кредиты.
В тарифе Premier добавляется количество кредитов — до 10 тысяч в месяц. В остальном тариф копирует функции PRO.
Сколько стоит: тариф Pro — 8 долларов в месяц при оплате за год, тариф Premier — 24 доллара. При помесячной оплате стоимость подписок составит 10 и 30 долларов соответственно.
Udio
Что умеет: создаёт композиции под требования пользователя. Можно выбрать подходящие жанры, загрузить аудиофайл-референс, указать требования к тексту песни. Во вкладке с продвинутыми настройками (стоимость два кредита) удобно настраивать генерацию клипов, время включения текста, учёт требований промпта при создании трека и скорость обработки.
Пользователи без подписки могут генерировать до четырёх песен одновременно,но не более трёх песен продолжительностью 2 минуты 10 секунд в день. Количество кредитов в день — 10, дополнительный кредитный лимит в месяц — 100.
Пользователи тарифа Standart могут генерировать до шести песен одновременно. Есть опция редактирования треков, создания песни из аудиоклипов, загрузки аудиофайлов, работы с обложками. Кредитный лимит составляет 1 200 на месяц без ограничений в течение дня (но не в пробной версии).
Тариф PRO отличается количеством одновременно генерируемых песен — здесь их максимум восемь — и количеством кредитов на месяц — 4 800. Также песня может быть создана из стилистических референсов.
Сколько стоит: тариф Standart — 8 долларов в месяц при оплате за год или 10 долларов при помесячной подписке. Тариф PRO — 24 доллара в месяц при оплате за весь год или 30 долларов, если рассчитываться за каждый месяц отдельно.
Как создать песню с помощью нейросети: пошаговая инструкция
Шаг 1. Выберите сервис и зарегистрируйтесь
Попробуем создать трек без слов. Помощь в этом нам окажет нейросеть AIVA — она открывается без применения дополнительных расширений или манипуляций с сетью. А пока мы будем создавать музыку, можем послушать радио. Переходим на сайт и выбираем подходящий формат регистрации.
Шаг 2. Настройте параметры: жанр, темп, инструменты
Для выбора способа генерации нажимаем кнопку Create и выбираем нужный. Используем генерацию по шагам.
Выбираем подходящий жанр. Остановимся на фолк-роке.
Проверим настройки композиции или пропишем дополнительные требования. Нажимаем Generate.
Шаг 3. Сгенерируйте и отредактируйте результаты
Полученный результат можно посмотреть и изменить. Любую дорожку получится вывести в соло-исполнение или заглушить.
Также дорожки можно точечно изменять по нажатию на значок карандаша.
Выбираем продолжительность композиции, указываем количество треков, даём название рабочему пространству и сохраняем его в своей учётной записи.
Нажимаем Create Composition и ждём.
Теперь получившийся трек можно послушать, загрузить, отредактировать или удалить.
При генерации и редактировании треков стоит помнить о лимитах для бесплатного тарифа. Об этом сообщает индикатор в нижнем левом углу.
Плюсы и минусы ИИ-музыки
При всех своих преимуществах на данном этапе развития ИИ для создания музыки остаются мощными, но лишь инструментами. Как у любого инструмента, у них тоже есть свои сильные и слабые стороны. Без общей законодательной базы остаются и некоторые острые вопросы, такие как авторские права и интеллектуальная собственность.
Преимущества
Искусственный интеллект меняет подход к созданию музыки — он не заменяет творчество, а расширяет возможности. Вот ключевые плюсы работы с нейросетями:
- Ускорение процессов. На создание музыки и текстов уходит меньше времени, чем при «ручной» работе. Свести детали в полноценный трек можно без студий, профессиональной аппаратуры и техники.
- Гибкость в работе. Многие сервисы позволяют экспериментировать с одним мотивом столько времени, сколько нужно, чтобы добиться наилучшего результата.
- Создание уникальных композиций. При правильном использовании промптов и комбинации жанров можно получить оригинальную мелодию или готовую песню.
- Доступность без музыкального образования. Алгоритм может предложить неожиданные, но подходящие решения, даже если вы не знаете теорию музыки. Нейросети помогают находить новые идеи, мотивы и стили в процессе работы над треком.
Недостатки
Нейросети открыли новые горизонты для творчества, но их использование связано с объективными сложностями:
- Самоповторы. Основной недостаток ИИ — его же сильная сторона: работа с паттернами и обучение на уже имеющихся материалах. Это неизбежно влечёт за собой шаблонность и узость подхода. Но этот минус можно обойти при помощи подробного промпта и чётких требований по желаемому результату.
- Сложности с авторскими правами. Многие произведения, на которых обучаются модели, имеют авторов. Но их композиции используются бесплатно, что несёт не только творческий, но и материальный ущерб. Уже появились законы, регламентирующие работу ИИ в области интеллектуальной собственности, но до формирования единой и взвешенной системы ещё далеко.
Нейросети не смогут полноценно заменить талантливых музыкантов и певцов, но с их помощью каждый может попробовать себя в роли композитора. Не бойтесь тестировать разные сервисы — как минимум один сможет открыть вам дорогу к собственной музыке и вдохновению.
Обложка: freepik / Freepik
