Текст в анимацию в UE 5.8 | DDS Motion + NVIDIA Kimodo
Dark Dojo Studios
0:00 / 0:00
Текст в анимацию в UE 5.8 | DDS Motion + NVIDIA Kimodo
10 836 просмотров · 9 дней назад
Dark Dojo Studios
948 подписчиков
10 836 просмотров · 9 дней назад
ССЫЛКИ
Попробуйте Kimodo бесплатно: https://huggingface.co/spaces/nvidia/...
Приобретите DDS Motion:
https://darkdojostudios.com/products/...
Документация:
https://darkdojostudios.com/pages/dds...
Patreon: / darkdojostudios
Добавьте The Fixers в список желаний в Steam:
https://store.steampowered.com/app/38...
Присоединяйтесь к Discord: / discord
Веб-сайт: https://darkdojostudios.com/
Введите текст, который вы хотите использовать для своего персонажа Чтобы создавать и генерировать анимацию на собственном компьютере,
внутри Unreal Engine 5.8. Без облака, без подписки, без платы за генерацию.
DDS Motion интегрирует модель движения NVIDIA Kimodo в редактор Unreal в качестве полноценного инструмента для создания анимации.
Вы пишете подсказку или временную шкалу подсказок, которые плавно перетекают друг в друга, генерируете анимацию локально на собственном графическом процессоре, затем позируете, назначаете ключевые кадры, зацикливаете, обрезаете и перенацеливаете результат на Мэнни,
Куинна или Метачеловека. В этом видео я показываю весь процесс, от первой подсказки до готовых клипов: ходьба, удар, бег зомби, смешение двух подсказок, атака мечом и
анимация сидения, включая реквизит, IK-позирование и перенацеливание на Метачеловека.
ЧТО ОН ДЕЛАЕТ
Напишите анимацию. Опишите движение. Соедините несколько подсказок с их собственной длительностью, и плагин будет плавно переходить между ними, так что один клип может идти, встать на ноги и остановиться.
Сгенерируйте анимацию. Запускается локально на вашем графическом процессоре. Управляйте начальным значением генератора случайных чисел, сэмплами, шагами диффузии и тем, насколько сильно результат следует за вашим текстом относительно заданных ограничений позы.
Позиционируйте. Полный контроль FK и IK над сгенерированным результатом. Выберите ключевые моменты, которые вы хотите зафиксировать. Создайте
цикл, который превращает клип в бесшовный цикл.
Приземлите. Прикрепите предмет к руке или добавьте в сцену стул, ящик или выступ и
позируйте относительно чего-то реального.
Отправьте. Обрежьте, выберите движение корня или движение на месте, экспортируйте, а затем перенацельте на своего персонажа.
Проверьте. Каждая генерация записывает рецепт, полученное начальное значение генератора случайных чисел, версию модели и контрольные суммы файлов, поэтому любой клип можно воспроизвести точно.
РАБОТАЕТ НА ОБЫЧНОЙ ВИДЕОКАРТЕ
Kimodo требуется около 17 ГБ видеопамяти для запуска всего на графическом процессоре. Одна из настроек перемещает кодирование подсказок в системную оперативную память и снижает измеренный пиковый объем видеопамяти примерно до 2 ГБ.
Измерения проводились на AMD Radeon RX 7900 XTX под управлением ROCm, используя собственный код плагина:
Кодировщик текста на GPU: 15,93 ГБ пиковой видеопамяти
Кодировщик текста на CPU: 1,82 ГБ пиковой видеопамяти
Шестисекундный клип, четыре сэмпла, кодировщик на CPU: 2,01 ГБ
Видеопамять практически не увеличивается с увеличением длины клипов или количества сэмплов. Поскольку Unreal Engine также требует
видеопамяти, планируйте около 6 ГБ в качестве практического минимума. Вам также потребуется 32 ГБ системной оперативной памяти,
что относится к любой вашей видеокарте. Эти показатели были измерены на AMD. Ожидается, что NVIDIA будет вести себя аналогично, но измерения на оборудовании NVIDIA еще не проводились.
Примечание: модель движения и кодировщик текста не распространяются вместе с плагином. Вы загружаете их самостоятельно с бесплатной учетной записью Hugging Face, включая этап одобрения Meta для Llama 3.
Руководство по установке описывает каждый шаг.
РАЗДЕЛЫ
0:00 Вступление
0:20 Как использовать DDS Motion
0:49 Экспорт анимаций
1:20 Прикрепление объектов
1:42 Создание статических мешей
2:07 Простая анимация ходьбы
2:35 Смешивание ключевых кадров
3:07 Кости IK
3:53 Перенацеливание анимаций
4:29 Анимация удара
5:24 Перенацеливание MetaHuman
5:45 Анимация бега зомби
7:16 Анимация с двумя подсказками
8:50 Анимация атаки мечом
10:24 Анимация сидения
12:03 Заключение
#UnrealEngine #UE5 #NVIDIA #Kimodo #AIAnimation #GameDev #TextToMotion #IndieGameDev