Stable DiffusionでAI動画を生成できる拡張機能『SD-CN-Animation』の使い方!

Stable Diffusion

AI画像を生成するために多くの方がStable Diffusion を使用していると思いますが、『SD-CN-Animation』という拡張機能を使用することで、AI動画を生成することも可能です。

  • SD-CN-Animationって何?
  • AI動画を生成してみたいけど難しそう

というお悩みを解決します。

今回は、「SD-CN-Animation」を使用してテキストから動画を生成する方法をわかりやすく解説します。

この記事を最後まで読んでいただくと、AI画像からAI動画を生成することができるようになります。

内容をまとめると…

  • SD-CN-Animationは動画だけでなくテキスト(プロンプト)からもAI動画を生成できるStable Diffusionの拡張機能

  • txt2vidモードでは入力画像なしでもプロンプトだけで動画生成が可能で、画像を追加すればより狙い通りの結果になる

  • Processing strengthとFix frame strengthの2つのパラメータで動きの大きさを調整でき、FPS12・Length60で約5秒の動画が作れる

  • 静止画と比べると完成度はまだ発展途上だが、導入・操作自体はシンプルで気軽に試せる

プロンプト・導入・制作フローをまとめて学びたい方向けに、AI制作に役立つ無料資料を用意しています。

画像生成だけでなく、AIに作業を任せるためのエージェント活用資料もあわせて受け取れます。

監修者_SD
監修者プロフィール
沖@AI画像生成
Xで5万人のフォロワーをかかえる、画像生成クリエイター。Stable Diffusionを中心に、様々な画像生成AIや動画生成AIを駆使し、コンテンツを制作。画像生成に関連する講演会なども多数こなす。AI画像制作の仕事も募集中。

拡張機能「SD-CN-Animation」とは?

SD-CN-Animationとは、動画やテキストを元に新たに動画を生成してくれるStable Diffusion の拡張機能です。

以前に紹介したmov2movもAI動画を生成してくれる拡張機能であり動画をAI動画に生成しなおしてくれる機能ですが、SD-CN-Animationでは、テキストからAI動画を生成することもできます

※mov2movについて詳しく知りたい方は、こちらの記事を参考にしてください。

拡張機能「SD-CN-Animation」の導入方法

①WebUIを開き、「Extensions」タブ→「Install from URL」タブを開きます。

URL for extension’s git repositoryに下記のURLを入力し、Installボタンをクリックします。

GitHub - volotat/SD-CN-Animation: This script allows to automate video stylization task using StableDiffusion and ControlNet.
This script allows to automate video stylization task using StableDiffusion and ControlNet. - volotat/SD-CN-Animation

③「Installed」タブを開いて、「Apply and restart UI」ボタンをクリックします。

以上で、『SD-CN-Animation』の導入は完了です。

再起動すると「SD-CN-Animation」タブが追加されています。

拡張機能「SD-CN-Animation」の使い方

①「SD-CN-Animation」タブを開き、「txt2vid」タブを選択します。

②「Input image」に画像をドラッグ&ドロップする。(画像をなしで、プロンプトのみでも動画を生成できます。)

③プロンプト欄にプロンプトを入力する。(ネガティブプロンプトは、初めから入力されています。)

④パラメーターを調節します。

  • Processing strength(Step1):「0.85」デフォルト
  • Fix frame strength(Step2):「0.15」デフォルト。数値が大きくなるほど動画に動きが出ます。
  • Sampling method:お好みのもの
  • Length(in frames):VideoFPSにより動画時間を決めます。生成時間がかかるため5秒程度の動画がおすすめです。(例 FPS:12、Length:60で5秒の動画)
  • VideoFPS:1秒間に表示される画像の枚数。数字が多い程スムーズな動画になるが生成時間がかかります。

生成された動画は、stable-diffusion-webui」→「outputs」→「sd-cn-animationに保存されています。

まとめ

いかがでしたでしょうか?

動画を作れる拡張機能『SD-CN-Animation』について解説してきました。

今回のポイントをまとめると、以下のようになります。

  • SD-CN-Animationとは、動画やテキストから動画を作れる拡張機能
  • 「SD-CN-Animation」と「ControlNet」のダウンロードが必要
  • テキストから動画を生成する方法
  • パラメーターの調整について

静止画と比較して完成度がいまいちですが、十分に楽しめるのでぜひ参考にしてみてください。

画像生成AIを使いこなすには、ツールの使い方だけでなく、プロンプト改善・環境導入・モデル選定・作業フローの理解が重要です。制作に役立つAI資料をまとめて受け取れます。

クリエイター向け資料を受け取る
10秒で受取完了 画像生成完全ガイド無料配布中 無料で受け取る