Генерация видео на моделях Wan 2.2 и LTX-2 в ComfyUI | Гайд для новичков
Kargim_Live
0:00 / 0:00
Генерация видео на моделях Wan 2.2 и LTX-2 в ComfyUI | Гайд для новичков
8 502 просмотра · 5 месяцев назад
Kargim_Live
2,51 тыс. подписчиков
8 502 просмотра · 5 месяцев назад
Меня просили, я обещал, я сделал... Большое видео про генерацию видео в ComfyUI на моделях Wan 2.2 и LTX-2.3. Видео будет в первую очередь полезно для новичков.
Рассмотрим все самое необходимое:
Что из себя представляют эти модели
Что качать, где качать и в какие папки закидывать
Как устроены базовые схемы и как их использовать
Какие параметры крутить, как использовать разные режимы
Как апскейлить видео и увеличивать Fps
Как использовать мою схему для генерации видео
И много всего полезного
Надеюсь, данное видео будет для вас интересно и полезно. Приятного просмотра!
Полезная информация и ссылки:
Инструкция по промтингу в Wan: https://alidocs.dingtalk.com/i/nodes/...
Инструкция по промтингу в LTX-2: https://ltx.io/model/model-blog/promp...
Мой гайд по моделям для изображений: • Основные модели для генерации изображений ...
Мой большой гайд по ComfyUI для новичков: • Собираем свою схему в ComfyUI с нуля на ба...
Мой гайд по установке Комфи и кастомных нод: • Гайд-демонстрация установки локальной верс...
Мои готовые схемы: https://cloud.mail.ru/public/9wBS/xvW...
Группа в Telegram: https://t.me/sd_amd_ph
Discord сервер: / discord
Мой Telegram: https://t.me/kargim
Поддержать меня можно на Boosty: https://boosty.to/kargim
Содержание:
00:00 О чем видео
02:05 Фильтруем шаблоны в Комфи
02:49 Кратко про Wan 2.2 модели
05:48 Кратко про LTX-2 модель
06:46 Два похожих шаблона i2v для Wan 2.2
09:17 Модели Wan 2.2
18:49 Текстовый кодировщик для Wan 2.2
19:47 VAE для Wan 2.2
20:26 Lora 4-Step для Wan 2.2
21:51 Разбираем схему
23:34 Куда положить файлы модели
25:04 Дальше разбираем схему
27:30 Подробно про параметры (настройки) генерации
26:23 Запускаем генерацию
38:04 Про недавние важные оптимизации в Комфи
39:57 Про требования к ПК и файл подкачки
43:54 Смотрим на результат в режиме i2v для Wan 2.2
45:09 Запускаем генерацию в режиме FLFV для Wan 2.2
46:16 Как увеличить хронометраж видео для Wan 2.2
47:57 Реальный пример увеличения длины простым способом для Wan 2.2
49:50 Смотрим результат FLFV для Wan 2.2
51:30 Про инструмент SVI для увеличения хронометража для Wan 2.2
51:44 Про список используемых мной нод для Комфи
53:14 Где качать лору для SVI
54:14 Где взять тестовую схему для SVI
54:56 Разбор и тестирование схемы с SVI для Wan 2.2
01:13:15 Конец первого блока про Wan 2.2
01:13:41 Переходим к шаблонам для LTX-2
01:14:26 Модели для LTX-2
01:17:44 VAE для LTX-2
01:20:07 Текстовый кодировщик для LTX-2
01:22:39 Куда положить файлы модели для LTX-2
01:23:04 Где брать лору для ускорения генерации для LTX-2
01:24:18 Дальше раскладываем файлы по папкам
01:24:50 Разбор и модификация схемы для генерации LTX-2
01:32:11 Про механизм апскейлинга в базовом шаблоне LTX-2
01:34:33 Дальше разбираем схему для LTX-2
01:36:44 Про инструмент улучшения промта в схеме LTX-2
01:39:02 Дальше разбираем схему для LTX-2
01:48:28 Запускаем первую генерацию на LTX-2
01:50:06 Размышления по блоку апскейлинга в схемах LTX-2
01:52:39 Смотрим первый результат на LTX-2
01:53:36 Разбираем и исправляем схему FLFV для LTX-2
02:03:08 Запускаем генерацию с превьюшкой на LTX-2
02:06:40 Про генерацию по входному аудио на LTX-2
02:06:40 Про крутые возможности работы LTX-2 с разными данными
02:15:26 Конец первого блока про LTX-2
02:15:45 Разбор моей схемы для видео. Базовая структура
02:17:55 Разбор блока загрузки и параметров генерации
02:26:32 Разбор и тест блока Wan 2.2 на примере работы с SVI
02:35:56 Разбор блока апскейлинга и интерполяции видео
02:37:02 RTX апскейлер
02:37:35 Апскейлинг через модель
02:40:43 Апскейлер SeedVR2
02:44:12 Интерполяция видео (увеличение FPS)
02:44:46 Тест апскейлинга и интерполяции
02:47:25 Важное замечание по поводу последовательности процесса
02:49:24 Смотрим на результат апскейлинга и интерполяции
02:51:20 Разбор блока LTX-2
02:56:59 Разбор и тестирование lip sync в моей схеме на LTX-2
03:11:16 Тестирование продления видео + lip sync в моей схеме на LTX-2
03:17:21 Про жесткую вставку аудио
03:18:13 Тестирование переозвучки видео на LTX-2
03:23:33 Концовка
Если понравилось видео: поставь лайк, подпишись на канал и поделись этим видео с друзьями.
Есть вопрос или предложение? Оставь комментарий тут или вступай в группу в Telegram.