Музыкальные нейронные сети (подборка)

+39
afanв блоге Я нейрирую двумя хвостами15 июня 2024, 11:44
Пришло время мне, как музыканту, сообщить новость: наступил и на нашей улице праздник — появились нейронные сети, неплохо генерирующие музыку. Конкретно речь идет о нейронках Suno и Udio (желающим научиться милости прошу читать гайд). Генерируют настолько неплохо, что на них пошла новая мода «перепевок» различных песен и стихов в стилях как случайных, так и известных исполнителей.
По рунету, однако, пошла волна интереса конкретно к стилю группы Sabaton (кто бы мог подумать, что их голос запоет по-русски) и параллельно к Powerwolf, и теперь под них не делает каверы только совсем ленивый промтер :)
Поскольку на Табуне не видел ни одного даже сообщения, решил выложить небольшую подборку не только своих, но и чужих промтов.
Да, я тоже влился в эту теплую компанию, и от себя могу сказать, что результатами знакомства с этими чудесами новых технологий остался доволен. Боюсь ли я появления музыкальных нейронок — нет. Для меня это не более, чем еще один усилитель интеллекта (которым еще надо научиться правильно пользоваться). К тому же у каждой нейронки есть свой уникальный почерк, позволяющий знающему человеку мгновенно определить «авторство». Но предчувствую наплыв работ нейронки, выдаваемых за работу реальных людей.



Мои промты:





Чужие промты:

9 комментариев

Однако в ленту :)
afan
+1
Ещё пример / Another example
djdarvin
+2
Спойлер
pinejack
+1
мне, как музыканту, сообщить новость: наступил и на нашей улице праздник — появились нейронные сети, неплохо генерирующие музыку.

Раз уж о том зашла речь, точно ли это праздник для музыкантов? А-то художники не очень-то рады появлению рисующих нейросетей. Музыканты находятся в лучшем положении?
Necto
+3
За всех музыкантов говорить не берусь, но для меня точно праздник. И то, с каким энтузиазмом как я «зарылся» в нейросетку, явно говорит о том, что я скорее рад, чем нет. :)
afan
+2
… Кто такой музыкант? Следует правильно ответить на этот вопрос, чтобы в нужном русле продолжать дискуссию.
1.Битмейкеры (композиторы)
Есть прослойка, которая живёт за счёт того, что помогает написать «поэтам» и рэперам музыкальное сопровождение для своих песен. Тем, кто хочет прилично выглядеть при публичном релизе, будет стыдно заказывать «бит» не у живого композитора, а у программы. Но те, кто не считают необходимым поддерживать эту индустрию сочетания похожих музыкальных фраз с плагинами на разные инструменты и хотят простоты, без зазрения совести могут обратиться к программам.
2.Исполнители, певцы, аранжировщики
Есть люди, единственная деятельность которых — эксплуатация чужих песен от своего имени: перепевки и всё такое. У этих людей нейросети точно отрезают кусок аудитории. Придётся постараться, чтобы выделиться на фоне условной песни ЖЩ, спетой голосом Цоя. Способы есть: а.чиптюн с точным соответствием техническим ограничениям, ведь тогда это уже превращается в искусство вписывания в рамки, недоступные нейросети. б.верить в себя и заниматься всё же творчеством, пытаясь хоть как-то украсить свою вариацию мелодии. в.быть лучше нейросети — снять осмысленный клип, сымпровизировать на гитаре, придумать новые музыкальные ходы и так далее.
3.Поэты (рифмоплёты)
Есть люди, полные идей и текстов и способные воплотить их на бумаге в виде рифмованных строк и строф, но ни черта не толкующие в этих ваших ФЛ Студиях. Нейросети для таковых — спасение, поскольку легко дают воплотить мечту, придать черно-белым строкам звучание. Нейросеть — отличный инструмент для удовлетворения спроса таких людей.
Пи.Ещё один тип композиторов
Есть люди, для которых основной род деятельности — сочинение инструментальных композиций. Нейросеть безусловно умеет делать то же, но вопрос вот в чём — будет ли попытка её применения искажением авторского замысла, переосмыслением оного или расширением? Этот путь облегчит усилия инструментальных композиторов или опошлит их замыслы? (Облегчит ли?)
Ладно, я с трудом нашёл пример видео «continued by AI» с приличным звучанием.
4.Барды
В одном лице они и поэты, и исполнители, и композиторы. У нейросети нет единого лица, образа, бренда, и это не даёт ей смести таких людей. Кроме того, важная часть деятельности «бардов» — концерты, а слушать «фанеру» на них никто не ходит. Кроме того, бывают же мастера, что имеют по-особенному играть голосом, на арфе или на девятиструнной гитаре? Их не заменишь так вот.
5.Друзья
Если ты поехал на квартирник, в лес или ещё куда-то ещё и важна именно компания, в которой всё исполняется, безусловна, никакая машина этой атмосферы не заменит.
6.Меломаны
Отмечу, что все приведённые выше записи — кавера с использованием чужих голосов. Я сам отношусь к третьей категории — то есть умею плести рифмы, но не подкладывать под них музыку, поэтому для меня намного важнее способность нейросети музыкально обыграть мои скудные строки текста.
Suno версий 3.5 и 4 отлично справляются с этой задачей. Ниже — примеры песен с моими текстами, но исполнением и композицией от нейросети.
Вот пример пост-панка от 3.5 на уровне не хуже всяких групп-однодневок
А это — бодрый рочок от 4, где есть многослойность, а фальши нет
STACORP
+1
То есть музыканты, в общем, вообще больше не нужны?
Это я спрашиваю, потому что пугали, что они якобы художников заменят.
ARTEM_XJ15
+1
В принципе, я уверен, что, если взять профессионалов для того, чтобы они полноценно повторили исполнение подобных каверов, какие приведено выше, я уверен, что они всухую уделают исполнение ИИ. Причём, скорее, по качеству исполнения, поскольку они могут создать ещё более лучший на фоне оригинального произведения контраст по сравнению с ИИ. Я уверен, и аранжировка, и ОСОБЕННО голос будет играть решающую роль.

Но ИИ позволяет создать относительно годный музон, не прибегая к услугам других людей, какой-нибудь группы, и не требуя дорогих инструментов и (за исключением компьютера) оборудования, в этом-то и их прелесть. Поскольку маловероятно, что Сабатоны те же будут петь песню озверевшего Леопольда или «От винта!».
TheScriptComp (ред.)
+1
За меня в общем-то уже ответили, я лишь добавлю цитату Ашманова, что «нейросетка — это бредогенератор». Любой не начинающий музыкант ее уделает по качеству звука в пух и прах.
С другой стороны, те музыканты, чьи работы закопиращены по самое не могу, могут столкнуться с тем, что их работы и правда, уже меньше нужны.
afan
+1
Только зарегистрированные и авторизованные пользователи могут оставлять комментарии.