PinokioからWan２GPを起動して、設定をいかにしてAI動画をサンプルのpromptで作ってみました。
LTX-2 distilled GGUF Q8_0 checkpoint made by Kijai.
Attention mode auto/sage2, Data Type BF16
プロンプトは以下
A warm sunny backyard. The camera starts in a tight cinematic close-up of a woman and a man in their 30s, facing each other with serious expressions. The woman, emotional and dramatic, says softly, "That's it... Dad's lost it. And we've lost Dad."The man exhales, slightly annoyed: "Stop being so dramatic, Jess."A beat. He glances aside, then mutters defensively, "He's just having fun."The camera slowly pans right, revealing the grandfather in the garden wearing enormous butterfly wings, waving his arms in the air like he's trying to take off.He shouts, "Wheeeew!" as he flaps his wings with full commitment.The woman covers her face, on the verge of tears. The tone is deadpan, absurd, and quietly tragic.
Text Promptで生成しましたが、End ImageをStablediffusionで生成したAI画像にして、以下のAI動画が出来上がりました。
私の３０６０でものすごく時間がかかりました。
たった８秒のAI動画を生成するのに
Total Generation Time: 3h 52m 52s
でも、初めて、AI動画で登場人物がリップシンクで会話をしてくれたので大感動でした。
セリフと口の動きは問題ないようです。
もっと能力のあるRTXなら、こんなに時間はかからないでしょう。
いろいろと設定をいじったら、もっと楽しめるかも。
それと、会話が英語なので、日本語の会話も試したいですが、また３時間以上もかかるのは、結果を待つだけで疲れそうです。
とにかく時間はかかっても無料でここまでできるのですから、AI動画生成の進歩は恐ろしい。
