Нейросети уже уверенно протянули свои «щупальца» во все сферы деятельности человека, в том числе и в творческую. Мы подготовили для вас полезный ТОП нейросетей, создающих музыку. Они подходят как для любителей, так и для профи в данном сегменте. Со многим в процессе создания музыкального произведения предстоит поработать углубленно, но сгенерировать музыку по своему вкусу уже можно.
Нейросети, пишущие музыку в 2024 году
Нейронные сети развиваются в нескольких направлениях и пишут музыку разными способами. Одни берут спектрограмму из фото, другие случайным подбором делают мелодии на пианино, а третьи не просто генерируют звуки, а научились создавать настоящие хиты. Подробнее в ТОПе.
RIFFUSION
Офф. сайт: https://www.riffusion.com/
Интересная бесплатная нейросеть, которая генерирует музыку по текстовому запросу. Она ещё обучается и постепенно пополняет свою базу знаний. Программа использует в процессе сонограммы, представляющие собой визуализацию звукового ряда.
Запустить генерацию можно с главной страницы. Алгоритм работы предельно простой и понятный.
Mubert
Офф. сайт: https://mubert.com/render
Проект существует уже 4 года. Он беспрерывно генерирует музыкальные композиции, используя семплы из библиотеки звуков. Генерация запускается на главной странице через ввод ключевых слов на английском. Также нужно будет установить продолжительность композиции. Подписка стоит от 14 до 200 долларов.
Soundraw
Офф. сайт: https://soundraw.io/create_music
Одна из передовых нейросетей. Она даёт вам возможность не просто внести ключевые слова, описывающие будущую мелодию, но и задать жанр, настроение и другие характеристики. Программа предлагает десятки вариантов, которые вы можете дорабатывать по мере необходимости. Платный тариф стоит 17 долларов в месяц.
Melobytes
Офф. сайт: https://melobytes.com/en/app/melobytes
Довольно популярный проект, дающий бесплатный доступ с ограничениями. Демоверсия рассчитана на 5 обращений к сервису в сутки. При оформлении подписки доступ неограничен. Программа работает с ключевиками на разных языках, интерфейс имеет хороший набор настроек. Платные пакеты имеют ограничения по доступу – от 7 дней до года. Минимальная стоимость 747 рублей.
Humtap
Приложение, разработанное для iPhone. Оно генерирует звуки, опираясь на напетую мелодию. Работает нейросеть бесплатно и особенно полюбилась музыкантам. Им достаточно напеть несколько элементов крутящейся в голове композиции, как получат уже готовый трек.
AIVA
Офф. сайт: https://aiva.ai/
Проект стартовал приблизительно 7 лет назад. Он разрабатывался для генерации музыкальных композиций для рекламы, видеоигр или фильмов. Нейросеть создаёт эмоциональные треки с нуля, а также помогает корректировать уже готовые мелодии. Кроме того, пользователи могут создавать разные вариации на одну и ту же песню. Проект имеет гибкую ценовую политику и широкий выбор тарифов под разные нужды. Минимальная стоимость 11 евро в месяц.
hmusika!
Офф. сайт: https://huggingface.co/spaces/marcop/musika
Простейший стриминговый сервис от Яндекс сейчас научился создавать музыкальные композиции. Интерфейс у него предельно простой, выбор настроек минимальный. Поэтому результат зачастую оставляет желать лучшего, но и что-то интересное нейросеть может создать.
MuseNet
Офф. сайт: https://openai.com/blog/musenet/
Проект от OpenAI создаёт оригинальную, необычную и действительно красивую музыку. Нейросеть обучали сотнями тысяч треков, и она способна генерировать мелодии практически во всех жанрах. Программа является прототипом, но доступна для всех пользователей.
Amper Music
Офф. сайт: https://www.shutterstock.com/discover/ampermusic
Достойная нейросеть, которая помогает создавать музыку к фильмам, видеоиграм, коммерческим проектам и не только. Они имеет вид облачной платформы и радует простым интерфейсом. Пользователям доступна бесплатная версия, имеющая ряд ограничений по функционалу. Про-версия позволяет в полной мере оценить возможности программы.
Нейросеть MusicLM
Сайт: https://google-research.github.io/seanet/musiclm/examples/
Проект запустил Google и до настоящего момента не даёт обычным пользователям доступ к нему. В сети можно найти только демонстрационные ролики, приоткрывающие завесу тайны над возможностями программы. Как утверждают разработчики, она способна создавать как длинные, так и короткие треки. Генерации делаются по текстовому описанию. Также нейросеть может взять за основу мелодии, которые наигрывает или напевает пользователь.
Ожидается, что MusicLM будет работать во всех жанрах. Она воспринимает даже некоторые индивидуальные пользовательские нюансы в описании. Специалисты могут познакомиться со всеми тонкостями функционирования и обучения нейронной сети через запрос технической документации.
Нейросети, которые пишут музыку по фото
В сети существуют нейронные сети, создающие мелодии по фотографиям. Вы просто заливаете изображение и через несколько минут получаете готовый трек.
Image to Music
Офф. сайт: https://huggingface.co/spaces/fffiloni/img-to-music
Визуально проект напоминает нейросеть hmusika! – тот же простой интерфейс и алгоритм работы. Вы загружаете картинку и выставляете параметры будущей мелодии. Их немного: скорость воспроизведения, длительность и тип композиции. После этого запускаете генерацию.
Imaginary Soundscape
Офф. сайт: https://imaginarysoundscape2.qosmo.jp/
Экспериментальная программа, создающая звуки и мелодии на основе загруженной картинки. Она может быть абсолютно любой, включая фон и подложку. ИИ сам выбирает конкретные ландшафты и накладывает на них звуки, предлагая пользователям 3Д экскурсию, сопровождающуюся определёнными звуковыми эффектами.
Сгенерировать звуки через нейросеть онлайн
Не все нейросети требуют длительной и детальной работы над треком. В сети можно найти программы, которые дают возможность за несколько секунд сгенерировать какие-то комбинации звуков. Они могут натолкнуть композитора на новую идею и стать основой для нового шедевра.
Typatone
Офф. сайт: https://typatone.com/m/CowbilTEEP
Простейшая программа, генерирующая музыку по нажатию клавиш. Она работает на ИИ, и сама создаёт звуковые эффекты. Её нельзя отнести к пиано ролл, так как клавиши к раскладке не привязаны.
Работа начинается с главной страницы. Вводите текст, и каждая буква будет сопровождаться звуками. Можно загрузить текст из стороннего источника. Пользователь может дать ссылку на своё творение, поделившись с друзьями и знакомыми. Обучающего ролика программа не имеет, но весь алгоритм действий интуитивно понятен.
AI Duet
Офф. сайт: https://experiments.withgoogle.com/ai/ai-duet/view/
Программа, позволяющая поиграть на пианино прямо на компьютере. После загрузки перед вами появится раскладка, каждое нажатие клавиши на клавиатуре будет сопровождаться виртуальным нажатием клавиши пианино. Она подсвечивается определённым цветом.
Для пользователя вся работа бесплатна. В верхнем правом углу есть информационная иконка. Она вызывает обучающий видеоролик. На этом функционал заканчивается.
Благодарю за ценную статью!