10 нейросетей для создания музыки

Бывает, что нужно наложить музыку на видео, но ничего подходящего найти не получается. Часть треков не подходят по стилистике, а часть уже надоела пользователям. Чтобы использовать музыку в видео, не обязательно искать ее на стоках и скачивать заезженные треки. Вместо этого можно воспользоваться нейросетями для генерации музыки и сделать трек самостоятельно.

В статье расскажем, как ИИ работает с музыкой, где можно использовать сгенерированные треки и какие нейросети помогут сгенерировать музыку по запросу.

Что такое ИИ-генерация музыки и как это работает

Нейросети позволяют генерировать музыку с минимальными усилиями. По сути, вместо человека с набором инструментов музыку создаёт искусственный интеллект.

Нейросети для генерации музыки можно условно поделить на три группы — в зависимости от принципа работы:

По шаблонам — ИИ обучается по загруженным композициям, а сам трек генерируется на основе текстового описания пользователя. Такие сервисы способны создавать полноценную музыку с голосом и любыми спецэффектами.

По нотам — ИИ создает музыкальные композиции в виде символов в определенной последовательности. В результате генерации получается партитура — последовательность нот и аккордов, по которым потом воспроизводится мелодия. Обычно такие ИИ используют для создания фоновой музыки, потому что воспроизводить человеческие голоса и различные тональности звуков они не могут.

По загруженному треку — ИИ разделяет дорожки, миксует отдельные отрывки, добавляет спецэффекты. Позволяет создать полноценный аудиофайл, но качество сильно зависит от уровня обучения. Такие сервисы могут создать качественную музыку, но исказить ритм и даже произношение.

В чем преимущества сгенерированной музыки

Полноценную музыку для прослушивания генерируют редко. Но нейросети активно используют для создания фоновой музыки, музыкальных эффектов к фильмам и играм, при монтаже видео. Работа с ИИ по сравнению с ручным созданием и редактированием аудиофайла дает несколько преимуществ:

• экономит время — пользователь не отвлекается на работу с инструментами, которой требует обычный аудиоредактор;
• дает выбор — через ИИ по одному шаблону можно сгенерировать несколько мелодий и выбрать подходящий вариант;
• упрощает создание мелодий — от пользователя не требуется специальных знаний или длительного изучения интерфейса.

Где можно использовать музыку, созданную нейросетью

Сгенерированный контент нельзя считать авторским, т.к. он не отражает профессиональные навыки и талант пользователя. По ст. 1257 ГК РФ автором произведения науки, литературы или искусства признается гражданин, творческим трудом которого оно создано. 

Поэтому нейросеть нельзя признать автором произведения. Если вы создали музыкальную композицию с помощью нейросети, по закону вы тоже не являетесь ее автором. Чтобы получить авторские права на произведение, необходимо его депонировать (закрепить авторские права сертификатом).

Юридически сгенерированный с помощью ИИ аудиофайл не защищен авторскими правами. Поэтому созданную музыку можно свободно использовать в личных целях. Но при использовании такой музыки в коммерческих целях нужно проверять, на каких музыкальных произведениях обучалась нейросеть:

• Если нейросеть обучали на треках с истекшим сроком действия авторских прав, сгенерированную музыку можно использовать по своему усмотрению. В России авторские права автоматически истекают через 70 лет после смерти автора.
• Если нейросеть обучали на треках с действующими авторскими правами, то авторы или их наследники могут подать в суд за нарушение авторских прав и плагиат. Суд будет выяснять, скопировано ли произведение полностью, его часть или на его основе было создано новое произведение.

Если сгенерированную музыку признают плагиатом, пользователю могут дать штраф за нарушение авторских прав. А площадки, на которых будет размещена такая музыка, заблокировать аккаунт пользователю-нарушителю.

Многие нейросети сами пишут о том, что созданную с их помощью музыку можно использовать в личных и коммерческих целях только авторизованным пользователям. Большинство нейросетей не дают пользователям с бесплатными тарифами лицензии на размещение сгенерированных треков на стриминговых площадках. На бесплатных тарифах права на композицию остаются у нейросети, на платных подписках права на музыку переходят пользователю.

Основные нейросети для создания музыки в 2024 году

Ниже представлен обзор лучших нейросетей, которые популярны среди пользователей и композиторов.

Suno AI

Suno — сервис, который генерирует песни по промпту. Он создает полноценные песни со словами и без слов. 

Работает сервис просто: для генерации нужно только отправить текст с описанием. Suno сам сделает музыку и озвучит текст. При этом текст песни можно генерировать с помощью готовых шаблонов или собственных описаний.

Права на песни нейросеть оставляет себе, на платных тарифах нейросеть передает права пользователям.

Плюсы:

• бесплатная генерация до 10 песен;
• нет сложных инструментов;
• можно создавать полноценные песни со словами;
• нейросеть генерирует визуальные обложки к композициям;
• песни и мелодии создаются быстро.

Минусы:

• использовать музыку в коммерческих целях можно только на платной подписке;
• сложно подобрать описание, когда требуется сгенерировать мелодию конкретного ритма.

Soundraw.io

Сервис позволяет создавать мелодии любого жанра. В Soundraw можно выбрать длительность (от 10 секунд до 5 минут), музыкальный стиль, настроение и темп. Есть встроенный микшер, который позволяет менять настройки сгенерированной композиции. 

Платная подписка позволяет скачивать треки, использовать их для коммерческого использования и публиковать на стриминговых платформах.

Плюсы:

• бесконечные генерации для стриминговых платформ;
• понятный интерфейс;
• много опций.

Минусы:

• нельзя создать разные миксы по одному шаблону (при одинаковых настройках ИИ каждый раз создает почти идентичную музыку, без разнообразия);
• для скачивания треков нужна платная подписка.

Riffusion

Riffusion — cервис ИИ-генерации музыки, а также видео для TikTok, Instagram* и YouTube.

Riffusion генерирует музыкальные треки на основе текстовых подсказок. А также создает обложку для трека в виде 2D-изображения, на котором звуковая волна меняется в зависимости от мощности сигнала и времени. Чтобы сгенерировать трек, нужно ввести запрос. Нейросеть создаст статичное видео с музыкой и подходящим под жанр изображением — это идеальный контент для Reels и Shorts.

На один текстовый запрос нейросеть создает три альтернативные композиции длительностью 12 секунд каждая. Полученные треки можно сохранить в виде аудиофайлов (MP3), вертикальных видео для TikTok и Instagram* (MP4). Также можно поделиться ссылками на них.

Плюсы:

• распознает запросы на русском языке;
• композиции можно скачивать на устройство; 
• удобный интерфейс.

Минусы:

• часто выдает достаточно странные композиции;
• выдает короткие композиции по 12 секунд.

Mubert

ИИ создает музыку по тексту и референсам: можно вставить ссылки на видео из YouTube. А также позволяет выбрать жанр и настроить микширование. 

При публикации сгенерированного бесплатного трека на сторонних площадках нужно указывать его первоисточник — оставлять ссылку на сайт Mubert.com. Бесплатные треки нельзя монетизировать или публиковать на стриминговых сервисах.

У Mubert есть 4 основных раздела:

• Mubert Render — раздел для создателей контента. Здесь можно создать саундтрек с помощью ИИ.
• Mubert Studio — раздел для «художников», желающих зарабатывать на генерации музыки. Здесь можно загружать свои сэмплы и генерировать на их основе стримы (потоки музыки), которые потом будут использоваться в генеративной музыке по всему миру.
• Расширение Mubert — раздел для создателей контента. С его помощью можно создавать высококачественную оригинальную музыке в Adobe AE или Premiere.
• Mubert API — раздел для разработчиков и брендов. Здесь можно создать оригинальную музыку для своего продукта или бизнеса, которую можно будет использовать в коммерческих целях.
• Mubert Play — раздел для слушателей. Здесь можно искать и слушать мелодии на любой вкус.

Плюсы:

• генерация музыки по шаблону из YouTube;
• можно создать аудиофайл длительностью до 25 минут;
• можно смешивать треки.

Минусы:

• права на треки и распространение на внешних площадках только на платной подписке;
• иногда не соблюдает задачи запроса.

Loudly

Сервис генерации, в котором можно наложить эффекты, смешать треки или создать мелодию с нуля. Среди важных ограничений — можно сгенерировать трек длительностью до 30 секунд. А смешать можно только 2 трека. На платной подписке можно генерировать треки длительностью до 7 минут.

Плюсы:

• в качестве шаблона можно использовать аудио, созданные другими пользователями;
• удобный интерфейс.

Минусы:

• ограниченное число генераций — 25 штук в месяц;
• 1 загрузка на устройство на бесплатном тарифе.

Veed.io

Veed — это сервис с большим набором функций: 

• генерацией музыки и голоса;
• созданием аватаров и изображений;
• генерацией видео; 
• редактированием аудио- и видеофайлов. 

Для генерации треков нужно зайти в раздел с ИИ генератором музыки и выбрать стиль песни (Chill/Hip-hop/Electronic/Country/Dance). Далее нужно ввести текстовый запрос и нажать кнопку «Генерировать дорожку». Трек можно слушать или загрузить на устройство.

Плюсы:

• много инструментов редактирования;
• можно скачивать сгенерированные видео на бесплатном тарифе (видео будет с водяным знаком).

Минусы:

• сложный интерфейс;
• нельзя скачивать треки на бесплатном тарифе.

MusicGEN (Facebook)

Утилита ИИ-генерации музыки от Facebook*. На основе текстового описания или загруженной мелодии нейросеть генерирует музыкальные композиции длительностью 15 сек, которые можно скачать на устройство. 

Если хочется создавать треки длительностью до двух минут, можно оформить подписку на Hugging Face — среду для разработчиков ИИ. 

Плюсы:

• генерация по тексту и аудиошаблону одновременно;
• все опции бесплатные;
• понимает русский язык;

Минусы:

• не очень удобный интерфейс;
• модификатор Large с максимальным набором опций работает только на мощных компьютерах.

AIVA

Генератор аудиофайлов с возможностью редактирования готового варианта. Работает только по аудио или видеошаблону. Созданные мелодии автоматически размещаются в YouTube (на канале AIVA). Готовую музыку можно использовать без ограничений.

Плюсы:

• есть редактор готовых произведений и приложение на ПК для редактирования треков;
• можно генерировать треки на основе референсов;
• можно экспортировать различные форматы файлов;
• нет ограничений по генерации треков.

Минусы:

• всего 3 бесплатные загрузки в месяц;
• треки не всегда генерируются в хорошем качестве.

Media.io

Medio.io — универсальный редактор и генератор аудио. Генерация музыки ограничена по параметрам: можно выбрать только жанр музыки, настроение и тему. Либо создать трек по текстовому описанию. 

Бесплатно можно создать всего по 2 музыкальные композиции длительностью до 5 минут: 2 трека по текстовому запросу и 2 трека по жанру музыки. Готовые треки можно скачать бесплатно. Для дальнейшего использования сервиса нужно оформить платную подписку.

Плюсы:

• много фишек для настройки генерации;
• можно выбирать длительность трека (от 10 секунд до 5 мин);
• понятный интерфейс.

Минусы:

• только по 2 бесплатные попытки на каждый вид генерации музыки;
• высокая цена платной подписки.

Приложение «Маэстро» от Сбера

Маэстро — ИИ-генератор музыки, который помогает создавать треки прямо в приложении «Сбербанк Онлайн». У сервиса удобный интерфейс, а музыку можно генерировать за 5 минут. 

Сервис работает так: получает информацию о стиле и генерирует несколько вариантов структуры будущего трека. Затем создает несколько вариантов будущей композиции и выбирает из них те, которые соответствуют заданному стилю. В итоге получается уникальное музыкальное произведение.

Воспользоваться «Маэстро» не так просто, как другими сервисами из подборки. Поэтому делимся краткой инструкцией, чтобы вы не запутались:

1. Зайдите в приложение Сбера — СБОЛ или «Сбербанк Онлайн».
2. Нажмите внизу на главном экране иконку «Салют» (или «Ассистент»).
3. Произнесите «Создай музыку».
4. Нажмите «Сгенерировать новый трек».
5. Введите автора и название (вымышленных или реальных).
6. Подождите (около 4-5 минут).

Когда трек будет готов, им можно поделиться в социальных сетях. Либо скачать — для этого нужно нажать на стрелочку рядом с треком, и тогда система предложит покинуть приложение Сбера, чтобы скачать мелодию или поделиться ею.

Плюсы:

• весь интерфейс на русском;
• есть выбор жанров с ритмами для микширования исходной музыки.

Минусы:

• нет ручного редактора;
• доступно только в приложении.

Заключение

На выбор есть много сервисов генерации музыки с помощью нейросети. Одни универсальны, другие созданы под конкретные цели вроде микширования или генерации музыки для Reels. При подборе рекомендуем учесть собственные потребности. А чтобы определиться было проще, собрали все сервисы в сравнительной таблице.