YuE2 ComfyUI: Редактирование песен с помощью ABC + 6-шаговый трюк, который я обнаружил случайно
ComfyUI Workflow Blog
0:00 / 0:00
YuE2 ComfyUI: Редактирование песен с помощью ABC + 6-шаговый трюк, который я обнаружил случайно
16 586 просмотров · 8 дней назад
ComfyUI Workflow Blog
22,7 тыс. подписчиков
16 586 просмотров · 8 дней назад
Теперь вы можете редактировать песню, созданную с помощью ИИ. YuE2 сначала записывает вашу песню в виде нот, поэтому, если один аккорд звучит неправильно, вы меняете этот аккорд и запускаете песню заново. Остальная часть песни остается неизменной.
В этом видео я демонстрирую полный рабочий процесс YuE2 в ComfyUI, от первой базовой песни до редактирования аккордов и создания каверов на основе эталонной песни.
Вот что произошло в моих тестах.
Моя первая песня звучала отлично, но она оборвалась до конца. Проблема была в максимальной продолжительности. 60 секунд — это предел, а не цель. Я увеличил его до 180, и модель сама определила реальную продолжительность и правильно завершила песню. Вы можете увеличить продолжительность до 900 секунд, если вам нужно больше места.
Затем я изменил один аккорд в нотации ABC, си-бемоль на соль-мальчишку. Вокалист раньше сильно напрягал эту строчку. После изменения все стало звучать легко. Я не трогал текст и ничего больше не перегенерировал.
Я также случайно обнаружил кое-что. Я проигрывал одну и ту же песню на 32 шагах и на 6 шагах, и разницы не заметил. 6 шагов оказались намного быстрее. Попробуйте на своей песне, прежде чем доверять этому, но на моей всё получилось хорошо.
Также в этом видео:
Как написать стилистическую подсказку из шести частей: темп, жанр, голос, ритм, инструменты и аранжировка
Как считать такты, если вам нужна точная длина песни
Куплет, припев и хук, и почему хук важнее всего
Что на самом деле меняют начальное значение, лад и температура, с примерами
Рабочий процесс с эталонными нотами в SheetSage2: ваш стиль, ваши тексты, в форме песни, которая вам нравится
Как исправить ноты ABC, которые не подходят к вашим текстам, используя любой инструмент чата с ИИ
Песня без какой-либо стилистической подсказки, где ABC сыграла решающую роль
Одна просьба: используйте эталон для формы, а не для копирования. Если вы скопируете чью-то песню, вы ничего нового не создадите, и можете получить претензию о нарушении авторских прав. Принесите свои собственные слова.
Ресурсы
Мой рабочий процесс: / yue2-comfyui-170159989
Модель SheetSage2 (sheetsage2_bf16.safetensors, находится в ComfyUI/models/audio_encoders): https://huggingface.co/Comfy-Org/YuE2...
Контрольная точка YuE2 (Comfy-Org, Hugging Face): https://huggingface.co/Comfy-Org/YuE2
Официальное руководство ComfyUI по YuE2: https://docs.comfy.org/tutorials/audi...
Лицензия: веса модели YuE2 используют CC BY-NC 4.0, что означает некоммерческое использование. Пожалуйста, проверьте это перед коммерческим использованием ваших песен.
Теперь сделайте для меня одну вещь. Проведите 6-шаговый тест на своей песне и напишите в комментариях: услышали ли вы разницу, и какая у вас видеокарта? Мне нужно знать, работает ли этот трюк на другом компьютере.
#YuE2 #ComfyUI #AIMusic