先日紹介したMacローカルで動画生成AI「Wan 2.2」を動作させた続きです。
紹介したImage to Videoのやり方と同様にして、First-Last Frame to Videoも動作させてみました。使うモデルは同じです。
ワークフローの例は下記です。
最初と最後の画像を指定すると、その間の画像をプロンプトに従って生成し、動画にしてくれます。単純な補完でなく、かなり違和感なく動いてくれるのがすごいです。（指示通り動かない場合も多いですが）
入力例１
以前撮影させていただいたこの２枚の写真を最初と最後に指定してみました。
出力サンプル１
出力はプロンプトやランダム性によってかなり変わりますので、思った感じにするにはかなり試行錯誤がいりますが、２枚の写真だけからかなりそれっぽい動画が生成されました。ちょっと中間の色味が変わってしまうのが何故かわかりませんでしたが。
うまくいけば、複数の画像を組み合わせて長い動画を作成できそうですね。
入力例２
最初と最後を同じ画像にすることもできます。この万博での写真を最初と最後に指定してダンスさせてみました。
出力サンプル２
なかなかうまく動かきませんでしたが、こんな感じに。うまくいけばループ動画を作成することができますね。
別のガンダムでも。
