TikTokやインスタ、YouTubeショートで話題になった、AIを使った「千と千尋の神隠し」の実写版動画を作成する過程を詳しく解説します。この記事では、画像生成にMidjourney、動画生成にRunway-GEN2、そして編集にFilmoraを使用しました。画像生成用のプロンプトを公開して解説します。参考にしていただけると幸いです。
はじめに
今回「千と千尋の神隠し」のAI動画を作成しましたので、その作成過程をシェアしたいと思います。画像生成はMidjouney。動画生成はRunway-GEN2にて作成しました。ちなみに動画の編集はFilmoraというアプリを使いました。
完成した動画は以下になります。
他の方の解説動画などでは「千と千尋の神隠し」のAI動画の作成にかかる時間は1分間の動画で大体1週間ぐらいかかるとのことでした。
しかし、私は再生時間が35秒なのと、妥協に次ぐ妥協をしていますのでAI動画完成までに費やした日数は2日です。時間にすると、10時間ぐらいだと思います。
作成手順
作成手順は以下の通りです。
【手順】
- Midjourneyで画像作成
- Runway-GEN2で画像を動画に変換
- 動画用音楽をMP3で用意
- Filmoraで動画編集
では順番に解説していきます。
Midjourneyで画像作成
実際に使ったプロンプトを公開し、解説します。
プロンプトは丸パクリしていただいても構いません。
千 ＆ ニギハヤミコハクヌシ①
千と千尋の神隠し
【プロンプト】
Color : Teal & Orange, Realistic Photo of Sen and Nigihayami Kohaku Nushi that white thin dragon with two horns of Spirited Away, no animation, --v 6.0 --ar 9:16
【日本語訳】
色: ティール & オレンジ、千と千尋の神隠しの 2 本の角を持つ白い細い龍、センとニギハヤミコハクヌシのリアルな写真、アニメーションなし、--v 6.0 --ar 9:16
【解説】
AIの画像生成は「運」です。
プロンプトで指示したあとは、こちらは期待して待つことしかできません(笑)
いいものができる時もあれば、全然思っていたのと違うものが出来上がったりします。
上の画像は運良く、いい画像をAIが生成してくれました。ラッキーでした。
ちなみに色をティール & オレンジにしているのは映画っぽくするためです。そしてプロンプトの最後の-v 6.0はバージョン６という意味です。AIに対しての指示で「最新のAI画像技術で画像を生成してください」という意味になります。
そして【--ar 9:16】というのは画角です。今回はTikTokとインスタ、YouTubeショートにアップするため画角を【9:16】に設定しています。YouTube動画として作成する場合は【--ar 16:9】に設定してください。
※--arのあとには半角のスペースが入りますので注意してください。
千 ＆ ニギハヤミコハクヌシ②
【プロンプト】
Color : Teal & Orange, Realistic Photo of Sen with pink Kimono and Nigihayami Kohaku Nushi that white thin dragon with two horns of Spirited Away, no hair ornaments, --v 6.0 --ar 9:16
【日本語訳】
カラー : ティール＆オレンジ、ピンクの着物を着たセンとニギハヤミコハクヌシのリアルな写真、千と千尋の神隠しの二本の角を持つ白い細い龍、髪飾りなし、 --v 6.0 --ar 9:16
【解説】
2枚目は【Zoom out 2×】したものです。
ニギハヤミコハクヌシ
【プロンプト】
Color : Teal & Orange, Realistic Photo of Nigihayami Kohaku Nushi that white thin dragon with two horns of Spirited Away, no hair ornaments, --no pink --v 6.0 --ar 9:1
【日本語訳】
カラー : ティール＆オレンジ、ニギハヤミ琥珀ヌシのリアルな写真、千と千尋の神隠しの二本の角を持つ白い細い龍、髪飾りなし、--ピンクなし --v 6.0 --ar 9:1
【解説】
こちらの画像は先程の【千 ＆ ニギハヤミコハクヌシ②】の画像が、部分修正で「千」だけを消したものです。そのため、最後の方に【ピンクなし】と指示しています。
これは「千」を消した際に、AIが上手く消せずにピンク色が残ってしまったので、プロンプト内で指示したものです。
窯爺
【プロンプト】
Color : Teal & Orange, Realistic photo of an old man with bald head and long dark brown beard, and wearing round black sunglasses, and wearing turtleneck like black full body tight, and there are 6 arms, background is smoking and steam, looking at viewer. Extreme close-up --v 6.0 --ar 9:16
【日本語訳】
色: ティール＆オレンジ、ハゲ頭と長い濃い茶色のひげを生やした老人のリアルな写真。丸い黒いサングラスをかけ、黒い全身をぴったりと締めたようなタートルネックを着ています。腕が 6 本あり、背景は煙と蒸気で、見ています。視聴者。極端なクローズアップ --v 6.0 --ar 9:16
【解説】
腕6本を表現してくれなかったので、クローズアップの画像にしました。
こういった妥協のような工夫も必要になってきます。
今回は顔やサングラス、髭、そして湯気はいい感じにできたので良かったです。
カエル
【プロンプト】
Color : teal & Orange, Realistic Photo of green frog with wearing plain blue Kimono is standing by two legs. background is Traditional gorgeous Japanese tatami house from Spirited Away --v 6.0 --ar 9:16
【日本語訳】
カラー：ティール＆オレンジ、青無地の着物を着て二本足で立っている緑のカエルの写実的な写真。背景は千と千尋の神隠しの伝統的な豪華な日本の畳の家です --v 6.0 --ar 9:16
【解説】
特になし
風景①
【プロンプト】
Color : Teal & Orange, Realistic photo of day time of Spirited Away with old Chinese buildings and many lantarns --v 6.0 --ar 9:16
【日本語訳】
カラー : ティール & オレンジ、古い中国の建物と多くのランタンがある、千と千尋の神隠しの昼間のリアルな写真 --v 6.0 --ar 9:16
【解説】
「古い中国の建物」と入力しましたが、千と千尋の神隠しの舞台は台湾の九份なので「九份」と入力すればもっとよくなったかもしれません。
風景②
【プロンプト】
Color : Teal & Orange, Realistic photo of day time of Spirited Away with old Chinese buildings and many lantarns, and a girl with short hair, and white T-shirt and pink half pants is walking away --v 6.0 --ar 9:16
【日本語訳】
カラー : ティール & オレンジ、古い中国の建物と多くのランタンがあり、短い髪の白い T シャツとピンクのハーフ パンツを着た女の子が歩き去る千と千尋の神隠しの昼間のリアルな写真 --v 6.0 --ar 9: 16
【解説】
千尋の服装である白いTシャツに緑を入れるのができなかったので、白地のTシャツで妥協しています。
それでも結構よくできたほうだと思います。
豚二匹
【プロンプト】
Color : Teal & Orange, Realistic photo of two pigs are eating Chinese foods and many Chinese dishes on big table by hands in China town with lantarns --v 6.0 --ar 9:16
【日本語訳】
色
色 : ティール & オレンジ、チャイナタウンでランタンのある大きなテーブルで中華料理と多くの中華料理を手で食べている 2 頭の豚のリアルな写真 --v 6.0 --ar 9:16
【解説】
手で食べていればもっと良かったですね。難しかったのでこちらの画像で妥協しました(笑)
カオナシ
【プロンプト】
https://s.mj.run/Vsk28Lek_s Color : Teal & Orange, Realistic Photo of No-face --v 6.0 --ar 9:16
【日本語訳】
色：ティール & オレンジ、カオナシのリアルな写真 --v 6.0 --ar 9:16
【解説】
カオナシが難しかったので、ネット上にあったカオナシの画像をMidjourneyにアップロードして、それを元に画像を生成しました。そのためプロンプトの最初にhttp:が入っています。
難しかったので、カオナシの目の上と下にある▲の紫マークはありません。作れませんでした（泣）
湯婆婆
【プロンプト】
https://s.mj.run/15cM-gnCwQ Color : Teal & Orange, Cinematic strong light, Realistic photo of Yubaba that old woman with big nose, and black eyes, and little bit blue eye shadow on eyelids, and topknot, and wearing plain blue medieval European dress from Spirited Away, background : Medieval European style gorgeous Glittering study room with a big strong light on a big desk, and many books, and some bookshelf, and night light from a window, --no Orange color dress --v 6.0 --ar 9:16
【日本語訳】
カラー：ティール＆オレンジ、映画のような強い光、千と千尋の神隠しに出てくる、大きな鼻と黒い瞳、まぶたに少し青いアイシャドウをした、中世ヨーロッパの無地の青いドレスを着た湯婆婆のリアルな写真、背景：中世ヨーロッパ風の豪華なきらびやかな書斎、大きな机の上に大きな強い光、たくさんの本、いくつかの本棚、そして窓からの常夜灯、 -- noオレンジ色のドレス --v 6.0 --ar 9:16
【解説】
プロンプトの最後の-【-no Orange color dress】というのは「オレンジ色のドレスは無し」という指示文になります。この時、湯婆婆の服にオレンジ色が入っていたので【-no Orange color dress】と書いてAIに消してもらいました。
もっと明るく豪華な背景にしたかったので、色々とそれっぽいことをプロンプトに入れてみたのですが、これ以上言うことを聞いてくれそうになかったので、こちらの画像で妥協しました。
※2枚目は【Zoom out 2×】したものです。
列車①
【プロンプト】
Color : Teal & Orange, Realistic Photo of an old long train is running on the sea --v 6.0 --ar 9:16
【日本語訳】
色：ティール & オレンジ、海の上を走っている古い長い列車のリアルな写真 --v 6.0 --ar 9:16
【解説】
2枚目は【Zoom out 2×】したものです。
列車②
【プロンプト】
Color : Teal & Orange, Realistic Photo of an old train with Two cars is running on the sea --v 6.0 --ar 9:16
【日本語訳】
色：ティール & オレンジ、2 両の古い列車が海の上を走っているリアルな写真 --v 6.0 --ar 9:16
【解説】
2枚目は【Zoom out 2×】したものです。
トンネル前
【プロンプト】
Cinematic lighting, Realistic Photo of a car in front of tunnel, background is field road and green forest, --v 6.0 --ar 9:16
【日本語訳】
映画のような照明、トンネル前の車のリアルな写真、背景は野原の道と緑の森、 --v 6.0 --ar 9:16
【解説】
Color : Teal & Orange】にすると紅葉の風景にされたので【Cinematic lighting,】にしています。これで「映画のような証明効果」を表現してくれます。
※2枚目は【Zoom out 2×】したものです。
ランタン
【プロンプト】
Color : teal & Orange, Realistic Photo of a lantarn --v 6.0 --ar 9:16
【日本語訳】
色 : ティール & オレンジ、ランタンのリアルな写真 --v 6.0 --ar 9:16
【解説】
動画のどこかで使えるかなと思って作った画像です。結局使いませんでした。
ハク
【プロンプト】
Cinematic lighting, Realistic photo of left beautiful black eye of young Asian man with black blunt bangs and long side hair, extreme Close-up, --no mole --v 6.0 --ar 9:16
【日本語訳】
映画のような照明、黒い鈍前髪と長いサイドヘアを持つ若いアジア人男性の左の美しい黒い目のリアルな写真、極端なクローズアップ、 --ほくろなし --v 6.0 --ar 9:16
【解説】
ハクはすごく難しかったです。
ネット上の画像をアップロードしたりしてみましたが、どれも上手くいかず、最終的には顔半分のみドアップで妥協しました。
前髪パッツンのおかっぱヘアをAIがなかなか表現してなかったです。
温泉
【プロンプト】
Color : Teal & Green, Realistc photo of gorgeous Japanese big hot springs inside gorgeous building, --no outside --v 6.0 --ar 9:16
【日本語訳】
カラー : ティール & グリーン、豪華な建物内の豪華な日本の大きな温泉のリアルな写真、 -- 外側なし --v 6.0 --ar 9:16
【解説】
「千と千尋の神隠し」っぽくはないですけど、まあ、良しとしました。
以上がAI画像生成です。
次は、画像を動画にします。
Runway-GEN2で画像を動画に変換
以上のMidjourneyで生成したAI画像を次はRunway-GEN2で動画にします。Runway-GEN2では最大18秒の動画を作ることができます。
Runway-GEN2無料プランだと125クレジット分の動画作成ができます。（5クレジットで1秒の動画を作成できます）
スタンダードプランだと月額12ドルで毎月625クレジットが追加されます。
正直125クレジットでは全然足りません。スタンダードプランでも足りないぐらいです。
私はスタンダードプランに入り、さらにクレジットの追加購入をしました。
クレジットの追加購入は10ドルで1000クレジットです。
Runway-GEN2のサイトはこちら→https://research.runwayml.com/gen2
runway-gen2
【Try Gen-2】をクリック
runway-gen2
Midjouneyで生成したAI画像をアップロード
runway-gen2
【Generate 4s】をクリックする
または…。
runway-gen2
左下の【General Motion】で動かす度合いを調整します。
初期設定では【５】になっています。
さらに動かす範囲を別途、設定したいのならば…。
runway-gen2
左のメニュー蘭の【Motion Brush】で動かしたい部分をブラシ機能で塗ります。
そして、設定蘭の【Horizontal】【Vertical】【Proximity】【Ambient】にて動かす度合いを調整します。
- 【Horizontal】：横（X軸）の動き
- 【Vertical】：縦（Y軸）の動き
- 【Proximity】：奥行き（Z軸）の動き
- 【Ambient】：変化（とにかく動かすorおまかせ）
設定が完了したら【Generate 4s】をクリックします。
runway-gen2
100％になるまで待ちます。
大体3分ぐらいかかります。
runway-gen2
生成が完了したら、再生して確認。
気に入らなければ、もう一度、設定し直してから【Generate 4s】で何回でもやり直すことができますが、やり直す回数分だけ【クレジット】は減ります。
runway-gen2
気に入れば【ダウンロード】をクリックして保存。
そして、同じ手順でRunway-GEN2を使って、他の画像も動画にします。
動画用音楽をMP3で用意
動画に合わせた楽曲をMP3形式で用意します。
無料・有料の楽曲提供サイトなどを使います。
AIが曲を作ってくれる【suno】という音楽生成AIもあります。
suno
無料プランもありますが、一日の生成回数は10回。そして、商用利用はできませんので注意してください。
有料プランだと月額10ドルで、月に500曲生成可能です。さらに商用利用が可能になります。
sunoはこちら→https://suno.com/
Filmoraで動画編集
動画編集アプリで動画を作成します。
私はFilmoraという動画編集アプリで編集しました。
こちらは有料で、年間だと1年間プランは6,980 円 （1 PCのみ）ですが、永続ライセンスは8,980 円 （1 PCのみ）で永久に利用できます。
他にもFlexClipという動画編集サイトもおすすめです。無料でも使用できますが、ウォーターマーク（ロゴ）が動画内に付きます。
有料プランだと1年分は4,980 円です。もちろんウォーターマークは付きません。
FlexClipのサイトはこちら→https://www.flexclip.com/jp/
Filmoraのサイトはこちら→https://filmora.wondershare.co.jp/
以下はFilmoraで編集したものです。
Filmora
動画の編集については長くなりますので、割愛させていただきます。
色んなサイトが解説していますので、検索しながら編集してみてください。
基本的には、スマートフォンのように本能的に操作できるようになっていますでの、思ったより簡単です。
最後にエクスポートして終了です。
以上が「千と千尋の神隠し」のAI動画作成の解説となります。
