画像を動かす無料AI動画生成ツールの選び方

TL;DR

用途に応じて、立体化ならLeiaPixやInstaverse、人物やキャラクターの発話ならHeyGenやSadTalker、本格的な映像生成ならPika LabsやRunway Gen-2を選ぶ。多くは簡単に試せるが、映像の崩れや画質、無料利用の制限があるため、出力を比較して目的に合うものを判断する。

Transcript

はいこんにちは ケイトです今回はですね無料で使える アニメーションAI動画生成AI8選と いうことでお届けしたいと思います早速な んですけどこの動画を見ていただきたい ですこちらはAIを使って 画像を動画にしたものになっています今 こういった動画生成AIっていうのが すごく勢いを増してきてるんですが今後 ですね間違いなく動画生成AIの時代が 来ると思ってますそんな中いち早く動画 生成AIのことを理解したいっていう方は 必ず今回の動画を最後まで見ていただき たいです今後動画生成AIでミッド ジャーニーみたいな 派遣を取るようなツールっていうのが必ず 出てくると思いますので今はいろんな あらゆる動画生成AIの 派遣争いみたいなことが起きてますこう いう時はとにかくもう全てのツールを使っ てみてど... Read More

Key Insights

• LeiaPixは、アップロードした静止画に奥行き感のある動きを付けるツールであり、動き方やアニメーション速度を設定画面から調整できる。
• Instaverseは、山、川、森林などの指示文を入力すると、立体的なフィールドと簡単なアニメーションを同時に生成できる。
• Pika Labsは、Discordの生成用画面で指示文と画像を送信して動画化するが、例では意図しない物体が現れ、実用面の課題も確認された。
• Animated Drawingsは、人物やキャラクターの画像を認識して骨組みを設定し、ダンスなど複数の動作テンプレートを適用できる。
• Genmoは、テキストから画像を生成し、その画像を選んで動画に変換できるが、作例の映像品質はまだ十分ではないと評価された。
• HeyGenは、用意された人物アバターと言語を選び、台本を入力するだけで、口を動かして話す動画を生成できる実用的なサービスである。
• SadTalkerは、人物画像と音声ファイルを入力すると、画像の人物が音声に合わせて口を動かす動画を生成できるオープンソースのツールである。
• Runway Gen-2は、テキストまたは画像から動画を生成できるが、画像変換時に指示文を加えすぎると元画像の特徴が失われる場合がある。

Questions & Answers

Q: 無料AI動画生成ツールは用途別にどう選べばよいですか？

作りたい動きの種類で選ぶのが基本です。静止画に奥行きを付けるならLeiaPixやInstaverse、キャラクターを動かすならAnimated Drawings、人物に話させるならHeyGenやSadTalker、指示文や画像から映像を作るならPika Labs、Genmo、Runway Gen-2が候補になります。

Q: 静止画に立体的な動きを付ける方法は？

LeiaPixに画像をアップロードすると、奥行き感を持つアニメーションを自動で作成できます。生成後は設定画面から動きの種類や速度を変更できます。指示文から立体的な空間そのものを作りたい場合は、Instaverseを利用する方法も紹介されています。

Q: Pika Labsで画像を動画にする方法は？

Discord内の生成用画面で作成コマンドを入力し、動作を記述した指示文と元画像を添付して送信します。ボクシング画像に歓声や手の上下運動を指定した例では動画が生成されましたが、最後に意図しない物体が出るなど、出力が安定しない場合もあります。

Q: イラストのキャラクターを動かす方法は？

Animated Drawingsに背景を除いたキャラクター画像をアップロードし、認識範囲と自動生成された骨組みを確認して進めます。その後、用意された動作テンプレートを選べば踊りなどを付けられます。手足が長いキャラクターのほうが動作に合わせやすいと説明されています。

Q: テキストだけからAI動画を作る方法は？

GenmoまたはRunway Gen-2に場面を表す指示文を入力して生成します。Genmoでは、まず指示文から画像を作り、その画像を選んで動画化する流れが紹介されました。Runway Gen-2では、海の風景を表す指示文だけから、魚が動く海中風の映像が生成されています。

Q: AIアバターに日本語を話させる方法は？

HeyGenで人物アバターを選び、動画編集画面の言語を日本語に設定して台本を入力します。生成を実行すると、選択した人物が口を動かしながら台本を話す動画になります。ただし、無料で使えるのは最初の数回程度で、その後はクレジット購入が必要だと説明されています。

Q: 人物画像を音声に合わせて口パクさせる方法は？

SadTalkerに人物の静止画と、その人物に話させたい音声ファイルを入力して生成します。紹介例では、男性の画像が日本語音声に合わせて口を動かしました。画質には課題があるものの、口の動きはそれらしく生成されていると評価されています。

Q: Runway Gen-2で元画像を保ったまま動画化する方法は？

元画像をアップロードし、まずは追加の指示文を入れずに生成する方法が推奨されています。新幹線画像の例では、そのまま生成したほうが元の雰囲気を保てました。一方、雪や画質に関する指示を追加した結果、元画像の特徴が大きく失われています。

Summary & Key Takeaways

• 紹介された8種類は、静止画の立体化、キャラクターアニメーション、テキストまたは画像からの映像生成、発話アバター作成に分類できる。LeiaPixとInstaverseは奥行き表現、Animated Drawingsは人物絵の動作、HeyGenとSadTalkerは口の動きを伴う発話に適している。

• Pika LabsはDiscord上で指示文と画像を送り、静止画に動きを加える。Genmoは指示文から画像を作った後に動画化し、Runway Gen-2はテキストと画像の両方に対応する。ただし、意図しない物体の出現、途中の形崩れ、元画像からの逸脱などが確認された。

• 実用性を重視する場合は、用途と制約を見比べる必要がある。HeyGenはリアルなアバター動画を作れる一方、無料利用は最初の数回に限られると説明された。おまけの有料サービスKaiber AIは、形を保ちながら似た画像を連続させるような表現や、横移動、奥行きの設定が可能である。