Gemini Omniを使ってAI動画を生成する方法｜ブログ

これまで動画制作といえば、株式会社リヴァイトでも王道はAdobe After EffectsやAdobe Premiere Proを使った制作でしたが、今回は5月に発表された「Gemini Omni」とStorybookを使ったショートアニメーションの生成に挑戦しました。 「Gemini Omni」とは？ Gemini Omniが従来のAIツールと何が違うのか？ その理由を3つにまとめました。 会話で指示できる「マルチターン動画編集」 「2秒目のキャラクターをジャンプさせて」「カメラがもっと寄って」など、チャットで追加の指示を出すだけで、元の映像を活かしたまま部分的な修正がすることができます。 世界観が統一されている 修正指示を重ねても、キャラクターや動画全体のトンマナが崩れず、ストーリー性のある動画を作りやすいのが強みです。 物理法則や文化背景をリアルに理解できる 物理的な理解が深く、たとえば水滴の落ち方や物体の動きが不自然にならず、これまでよりリアリティのある映像を作り出すことが可能に。 Gemini OmniでAI動画を生成する手順 ここでは、以前Storybookで作成した絵本をもとに、Gemini Omniを使って動画を生成・編集した手順を見ていきましょう。 Storybookで作成した絵本をGemini Omniを使ってAI動画作成する方法の表紙画像 Storybookで生成したオリジナル絵本 「どきどくわくわく おばあちゃんのうちまで」 STEP 1 画像素材の準備と完成イメージをまとめる 画像を高画質で保存 Storybookから、動画にしたいページのイラストをJPEGやPNGなどで高解像度画像として書き出します。（もちろん、自分で制作したイラストでも可能です） Gemini Omniにアップロードする参照用としてキャラクター、背景、オブジェクトなどの画像を最大5枚までを用意しておくことで、クオリティアップにつながります。 演出プラを準備する 動画の完成イメージを明確にプロンプトにするため、「主役・場所・カメラワーク・雰囲気」を盛り込んだテキストを事前に準備します。 「風で木の葉が揺れる」「子供が笑顔で手を振る」など、具体的な動作やカメラワークも書き出しておくとスムーズに進みます。 STEP 2 画像から動画を作る Geminiの動画生成画面を開く ブラウザで「Gemini」を開き、左メニューの「動画」タブ、またはプロンプト欄の「ファイル追加」から進めます。 Storybookで作成した絵本の画像をアップロード 用意した画像を最大5枚までアップロードします。アップロードした画像のアスペクト比に合わせて、動画が自動生成されます。 プロンプトで「アニメーション指示」を入力 STEP 1で準備した演出プランテキストを入力しましょう。 今回はGemini Omniに任せることで、どんな動画が生成されるのかも知りたかったのでざっくりとした指示のみで進めることに。 必ず入れてほしい内だけは、箇条書きにして入力しました。 Gemini Omni動画の生成画面 STEP 3: 生成した動画はチャットで調整する テイストや動きを確認する 動画が生成されたら、仕上がりをチェックします。 今回10秒の動画生成にかかった時間は約2分！予想よりずっと速く生成されてびっくり！ 会話型で簡単に修正する 元の絵本の「温かいタッチ」や「手描き感」が失われないよう、必要に応じて指示を追加します。修正の指示に複雑な操作は必要ありません！チャットを使ってかんたんに修正することができます。 BGMや効果音も追加してみる Gemini Omniは音の同時生成（ビルトインオーディオ）も可能です。 動画が淋しいと感じたら、BGMや効果音も追加してみるとグッとクオリティがアップします。 なぜか絵本のタイトルが勝手に変更されてしまったので、チャットでタイトルを修正します。 きちんと修正されました！ まとめ 完成した動画（実際は画像に合ったBGMが入りました） 一発OK！とは流石になりませんが、Gemini Omniを使ってみて最も感動したのは、「AIに指示を出すストレスの少なさ」です。 会話をしながら修正することで、直感的でハイクオリティな動画を作ることが可能になったのは、普段から動画を作成している身ですがとても感動的でした。 AI動画生成は今後も需要が増えていきますので、私たちも業務にどんどん取り入れてまいります。毎日が勉強ですが、新しい発見や体験はとっても楽しいですね！