Перейти к содержимому

【徹底解説】もう1つのMiniMax H3 Ref2VAモデルの使い方❗️無制限のマルチモーダル❗️簡単✕楽しい!異次元の動画合成❗️無料プロンプトメーカー❗️最適化ワークフロー❗️Colabコード!

AI映像研究会

0:00 / 0:00

【徹底解説】もう1つのMiniMax H3 Ref2VAモデルの使い方❗️無制限のマルチモーダル❗️簡単✕楽しい!異次元の動画合成❗️無料プロンプトメーカー❗️最適化ワークフロー❗️Colabコード!

22 130 просмотров · 1 мес. назад
AI映像研究会
3,26 тыс. подписчиков
22 130 просмотров · 1 мес. назад
こんにちは ^^y ご訪問ありがとうございます! 動画モデルのオープン市場が活気づいてきましたねー^^! 突撃隊長は最強動画&音声同時生成AI「MiniMax H3」です。 前回はFL2VAの基本モデルを解説しました。 今回は、あまり取り上げられていない、 Ref2VAモデルの研究報告でございます。 難しそう!と思われてるかもしれませんけど、実は簡単でした。 そして、このモデルは「楽しい!」です^^ FLUX2.kleinのマルチリファレンスに負けないほどの 超異次元な『動画合成モデル』です。^^; これを使いこなせばとんでもない映像が作れそう。 そして、操作がとってもシンプル! H3はプロンプトが大問題ですが、 配布のアプリに頼れば大丈夫そうです。 異次元の動画合成については、ぜひ動画本編をご確認ください! ------------------------------------------------------------------------------ [今回の付録] 1.Ref2VA用 GGUF最適化ワークフロー:2種(MediaLoader 有/無) 2.Googl Colab Ref2VA用起動コード(URL) 3.アプリ「MMH3用プロンプト・メーカー」(URL) ------------------------------------------------------------------------------ 動画内の簡単な作例をご参考に、ぜひRef2VAを試してみましょう! --------------------------------------------- 📌 目次(タイムスタンプ) --------------------------------------------- 00:00 今回のメニュー[MiniMax H3 Ref2VAモデル解説内容] 01:53 FL2VAモデルと何が違うの? 02:22 基本編:参照画像2つを合成 04:06 基本編:「声質」だけを参照する 05:08 基本編:「人物」だけを差し替える 06:04 中級編:動画参照でダンスの振り付けをコピー 07:20 中級編:音源参照で、画像が歌って踊る! 07:57 上級編:複数のキャストにセリフ付きで演技させる 09:23 ツール解説:プロンプトメーカーApp 11:13 ワークフロー解説::Ref2VAの必要モデルとカスタムノード 13:48 次回お知らせ&御礼 ----------------------------- NOTE まとめ記事 ----------------------------- https://note.com/synth_brain/n/nbd4c5... --- 以下、お約束の有料級「オマケ」集です^^ DLのときに「チャンネル登録」、「高評価」、「ハイプ」などポチしていただけると励みになります😆 感想や「こんな動画作れたよ!」やご質問などもコメント欄で教えてくださいね! --------------------------------------------------- 📥 1. 第19回_ファイル置き場 -------------------------------------------------- https://drive.google.com/drive/folder... ・Ref2VA ワークフロー✕2(MediaLoader 有/無) -------------------------------------------------------------------------------- 📥 2. Ref2VA用 軽量爆速ワークフローに必要なモデル&ノードのDL先URL -------------------------------------------------------------------------------- カスタムノード(git clone) === Ref2VA モデル用 === ①ComfyUI-Fantastic-MiniMaxH3-PromptBuilder【▶Media Loader】: https://github.com/Adudeguyman/ComfyU... ②ComfyUI-KJNodes【▶Model Preview Override】: https://github.com/kijai/ComfyUI-KJNo... === FL2VA モデルと共通 === ①ComfyUI-MiniMax-H3-Turbo: https://github.com/Larryvrh/ComfyUI-M... ②ComfyUI-H3-Multishot:※復活してます https://github.com/jlucasmcrell/Comfy... ③ComfyUI-GGUF: https://github.com/city96/ComfyUI-GGU... ④ComfyUI-VideoHelperSuite: https://github.com/Kosinkadink/ComfyU... ---------------------------------------------------------- モデル(ダウンロード) ■ 本体モデル(Ref2VA) ★①minimax-h3-ref2va-Q4_0.gguf https://huggingface.co/molbal/MiniMax... ■ LoRA(MiniMax-H3 Turbo for Ref2VA) ★①minimax_h3_ref2v_turbo_4step_v0.1_comfyui_bf16.safetensors https://huggingface.co/lightx2v/Minim... === FL2VA モデルと共通 === ■ テキストエンコーダー ①MiniMax-H3-encoder-Q4_K_M.gguf https://huggingface.co/joeygambino/Mi... ②MiniMax-H3-encoder-mmproj-F16.gguf https://huggingface.co/joeygambino/Mi... ■ VAE ①minimax_h3_audio_vae_fp32.safetensors https://huggingface.co/Comfy-Org/Mini... ②minimax_h3_video_vae_fp16.safetensors https://huggingface.co/Comfy-Org/Mini... -------------------------------------------------------------------------------- 🔗Google Colab用起動コード(Ref2VA) リンクURL -------------------------------------------------------------------------------- https://colab.research.google.com/dri... ------------------------------------------------------------------------ 【MiniMax H3 プロンプトメーカー(無料)】 ----------------------------------------------------------------------- https://minimaxh3-ref2va-prompt-gener... ※Gemini APIキー(無料枠OK)が必要 ------------------------------------------------------------------------------------------- 無料枠のGemini APIキー取得先: https://aistudio.google.com/app/apikey APIキーの取得手順: 1. 上記 URL にアクセスし、Google アカウントでログイン。 2. 利用規約に同意する。 3. 「Get API key」(または「APIキーを作成」)をクリック。 4. 新規プロジェクト(または既存プロジェクト)を選択してキーを発行・コピー。 ---------------------------------------------------------------------------------------------- 【関連動画】 MiniMax H3 最強動画AIのスタートキット❗️    • 【MiniMax H3】最強動画AIのスタートキット❗️VRAM8GB❗️軽量GGU...   ----------------------------------------------------------------------------------------------- ※こちらも話題![Krea2] ●【KREA2】世界が驚いた!驚愕画質-4つの秘密⁉️ ZIT&kleinとガチ対決❗️8GBにおすすめモデル❗️超シンプルワークフロー設定❗️    • 【KREA2】世界が驚いた!驚愕画質-4つの秘密⁉️ ZIT&kleinとガチ対決❗...   ●【総力特集】KREA2❗️最先端・拡張機能Top5-特盛ガイド❗️キャラ固定編集❗️LoRA!スタイル転写❗️コントロールネット❗️VAE高画質化ハック❗️    • 【総力特集】KREA2❗️最先端・拡張機能Top5-特盛ガイド❗️キャラ固定編集❗️...   #comfyui, #minimaxh3 ,#minimax , #ref2va , #動画生成ai , #gguf ,#4step , #turbo , #workflow, #tutorial, #free,