Перейти к содержимому

Обновление воркфлоу MiniMax | NVIDIA SoL-Refiner и DenoMix (ComfyUI)

Deno

0:00 / 0:00

Обновление воркфлоу MiniMax | NVIDIA SoL-Refiner и DenoMix (ComfyUI)

15 704 просмотра · 2 дн. назад
Deno
14 тыс. подписчиков
15 704 просмотра · 2 дн. назад
Продолжение обновления воркфлоу MiniMax H3. Представлены DenoMix — новая диффузионная модель, объединяющая оригинальную модель и Singularity v2, — а также воркфлоу, в котором опубликованный NVIDIA SoL-Refiner задействован на этапе апскейла. Singularity v2 даёт хороший результат, но нередко произносит реплики по-китайски, а поскольку модель обучена в основном на экшене, она чрезмерно реагирует даже на простые промпты. За время создания почти тысячи видео последовательно проверялись сочетание v2 с турбо LoRA, добавление LoRA v2 от KJ к v1.3 и оригинальная модель. Основа на v1.3 сохраняла шум в аудио; оригинальная модель хорошо следовала промпту и давала хороший звук, но уступала по визуальной эстетике и кинематографичности. Поэтому, ориентируясь на середину между следованием промпту и чистым звуком оригинала и визуальной эстетикой Singularity, две модели были объединены с добавлением весов — так получилась DenoMix (MiniMax R2V Pruned int8). Файл модели размещён на Hugging Face, его можно скачать и прямо из воркфлоу. В воркфлоу используются DenoMix и видео-VAE int8 (ускоренное декодирование); с учётом характеристик видеокарты работа начинается с разрешения 512. Первый этап завершает видео с турбо LoRA Алибаба за 8 шагов. Ранее применявшаяся турбо LoRA DMD даёт чёткую картинку без шлейфов, но звук порой глухой или с искажениями, а игра в репликах выглядит неестественно. После апскейла выполняется рефайн за 2 шага с турбо LoRA DMD и рефайнером NVIDIA. У MiniMax при разрешении выше 768 падает чёткость, и рефайнер дорисовывает мелкие детали. В официальном пайплайне NVIDIA финальный рефайн занимает 3 шага, но при тестировании результат выглядел избыточно и требовал больше времени, поэтому 2 шага признаны более естественными. Используется облегчённая версия рефайнера с пониженным рангом, отдельно извлечённая KJ. Заметной разницы в качестве с большой моделью почти не ощущалось. В конце показаны драматические сцены, созданные в этом воркфлоу. Тем, кто впервые с ним сталкивается, инструкция по использованию доступна в видео об оптимизированном воркфлоу MiniMax, опубликованном месяц назад. Воркфлоу можно скачать по ссылке Hugging Face ниже и в закреплённом комментарии. MiniMax H3 R2V Turbo 8+2 воркфлоу (Hugging Face) https://huggingface.co/Deno2026/MiniM... Видео об оптимизированном воркфлоу MiniMax месячной давности (инструкция)    • MiniMax H3 최적화 워크플로우 | ComfyUI   Модель DenoMix (Hugging Face) https://huggingface.co/Deno2026/MiniM... NVIDIA SoL-Refiner https://nvlabs.github.io/Sana/Sol-Ref... Облегчённый рефайнер · турбо LoRA Алибаба (Hugging Face · Kijai) https://huggingface.co/Kijai/MiniMax-... 00:00 Драматические сцены, созданные в воркфлоу DenoMix 01:15 Продолжение обновления оптимизированного воркфлоу MiniMax 01:41 Достоинства и ограничения Singularity v2 03:58 DenoMix — объединение оригинальной модели и Singularity v2 04:45 Выход NVIDIA SoL-Refiner 05:36 Структура нового воркфлоу — старт с 512 · 8 шагов · апскейл 07:29 Почему рефайн сокращён до 2 шагов 08:14 Облегчённый рефайнер от KJ 08:53 Итоговое видео 🚀 Deno AI HUB (воркфлоу, инструменты) https://deno2026.github.io/Deno-AI-HUB/ 🎬 DENO PICTURES (оригинальные AI-драмы и фильмы)    / @denopictures   💻 Характеристики ПК 9950X3D 128GB RAM RTX Pro 6000 #MiniMaxH3 #DenoMix #ComfyUI