ブラウザから今すぐ試せるStable Diffusionを用いた自動GIF生成モデルが登場
画像生成AI「Stable Diffusion」を利用した、GIFアニメーションを自動生成してくれる
モデル「stable-diffusion-animation」がGitHubに公開されました。
https://replicate.com/andreasjansson/stable-diffusion-animation
最初にどのような絵を生み出し、どのような絵に変化させていけばいいのかを、
開始プロンプトと終了プロンプトとして記入し、定義します。
次に生成するGIFアニメーションの幅を128、256、512、768、1024ピクセルから、
高さを128、256、512、768ピクセルから選択。ノイズ除去ステップ、一貫性を定める
プロンプトの強度、アニメーションのフレーム数、フレーム間の補間ステップ数、
分類子なしのガイダンスの尺度を設定します。
FPS、アニメーションの終わりに開始プロンプトに向かわせるかどうか、フレーム間の
補間にFILMを使用するかどうか、生成時に中間層の出力を表示するかどうかを決め、
「Submit」をクリックすれば生成が開始されます。
今回生成したGIFアニメーションは以下の画像をクリックすることで再生できます。
https://replicate.com/api/models/andreasjansson/stable-diffusion-animation/files/b2baa6cc-4a90-432b-9428-3c913aa40fcd/output.mp4
文章だけでなく、単語をカンマ区切りで入力してもOKです。今回は開始プロンプトを
「black cat(黒猫), three witches laugh(笑う3人の魔女), candles are all out
(すべてのキャンドルの火が消える), owl(フクロウ), bloody dagger(血まみれの短剣)」、
終了プロンプトを「horrible green-skinned witch with tie(ネクタイを結んだ恐ろしい緑色の肌の魔女),
grown serpent lies(横たわる大蛇)」と入力してみました。
https://replicate.com/api/models/andreasjansson/stable-diffusion-animation/files/6163820d-b702-4d46-8d0f-215967fb46ef/output.mp4
https://gigazine.net/news/20220901-stable-diffusion-animation/