LTX 2.3 Prompt Relay: расширенный промпт для нескольких кадров — превратите видео в динамичный ро...
Benji’s AI Playground
0:00 / 0:00
LTX 2.3 Prompt Relay: расширенный промпт для нескольких кадров — превратите видео в динамичный ро...
15 001 просмотр · 5 мес. назад
Benji’s AI Playground
34,9 тыс. подписчиков
15 001 просмотр · 5 мес. назад
Prompt Relay — это метод, не требующий обучения и готовый к использованию, который позволяет моделям ИИ-видео генерировать многособытийные, многокадровые видеоролики из единой структуры подсказок. Вместо одной непрерывной сцены вы можете определить глобальные подсказки для всего сюжета и локальные подсказки для каждого сегмента, точно контролируя, что происходит и когда. Он работает за счет изменения механизма временного перекрестного внимания во время вывода, что означает отсутствие тонкой настройки, обучения LoRA и необходимости в дополнительных моделях. Вы просто применяете формулу к существующей модели видео и генерируете.
Это видео предназначено для пользователей ComfyUI, создателей ИИ-видео и всех, кто работает с моделями, такими как LTX 2.3 или Wan 2.2, и хочет создавать более длинные многосценовые видеоролики локально. Если вы когда-либо пытались создать длинное видео, но обнаруживали, что персонаж морфируется, фон нарушается или нарушается целостность при смене сцены, это решение для вас. Это также подходит для создателей контента, которые делают видеоблоги в стиле UGC, видеоролики с говорящей головой в стиле селфи или многокадровый контент с использованием ИИ, поскольку Prompt Relay обрабатывает переходы между камерами, смену фона и непрерывное движение персонажей за один проход генерации.
Это важно, потому что генерация многособытийных видеороликов была одной из самых больших нерешенных проблем для видео с открытым исходным кодом и ИИ. Инструменты с закрытым исходным кодом, такие как Kling 3.0 и Veo 3.1, опережали в этом отношении, но Prompt Relay значительно сокращает этот разрыв. Он работает локально, бесплатен и совместим с уже имеющимися у вас моделями. В сочетании с Qwen 3 VL для автоматической генерации подсказок для сегментов вы можете перейти от одной идеи сюжета к полностью сегментированному многокадровому видео без ручного написания подсказок для каждого сегмента. Один только этот рабочий процесс значительно ускоряет создание прототипов и производство видеоконтента с использованием ИИ.
Мой пример рабочего процесса с настройкой VLM: https://www.patreon.com/posts/1562900...
Prompt Relay: маршрутизация подсказок во время вывода для временного управления при генерации многособытийного видео
https://gordonchen19.github.io/Prompt...
https://github.com/kijai/ComfyUI-Prom...
Видеохронология
00:00 - Введение: непрерывный видеоконтент и несколько кадров в ComfyUI
01:13 - Что такое Prompt Relay? (Метод обеспечения согласованности без обучения)
02:19 - Объяснение формулы и логики Prompt Relay
02:51 - Настройка пользовательского узла ComfyUI Prompt Relay
03:17 - Глобальные и локальные подсказки: структурирование сегментов
04:00 - Настройка рабочего процесса: конфигурирование моделей LTX 2.3 и VAE
05:03 - Подробный анализ узла Prompt Relay Encode
06:20 - Настройка длины сегментов и номеров кадров
06:52 - Настройка переходов: понимание параметра Epsilon
07:45 - Демонстрация: видеоблог в стиле селфи с переключением фона
08:49 - Демонстрация: плавные переходы камеры и согласованность персонажей
10:21 - Расширенный рабочий процесс: автоматизация локальных подсказок с помощью моделей визуального языка (Qwen 2 VL)
11:39 - Итоговые результаты и советы по созданию реалистичного контента UGC
13:07 - Резюме и заключение
Локальный Видеокарта для рабочих станций: https://amzn.to/3XfXsAO
--------------------------------------------------------------------------------------------------------------------------------
Если вам понравились подобные уроки, вы можете поддержать нашу работу на Patreon:
/ aifuturetech