メインコンテンツへスキップ
見出し画像

【徹底解説】AI短編アニメ作ってわかった「動画生成AIのリアルな限界」について。

    【徹底解説】AI短編アニメ作ってわかった「動画生成AIのリアルな限界」について。

    イケハヤです。

    昨日の夜、この2週間ほどかけて制作していたAI短編アニメ「クォ・ヴァディス」をついに公開しました。

    本当にたくさんの反響をいただき、ありがとうございます!

    制作期間は約35時間。

    一日2時間くらい作業すれば、誰でもこのくらいのアニメが作れてしまう時代になったんです。

    これって、すごいことですよね。

    ただ、実際にひとつの作品を走り切ってみて、AIアニメ制作という障害物レースの「どこに障害物があるのか」が、かなり解像度高くわかってきました。

    作っている側だからこそわかる、「ぐぬぬ……」となってしまうような、動画生成AIのリアルな限界。

    今日は、この話を日本でぼくより詳しく語れる人はいないんじゃないか、というくらいマニアックな視点でお届けしますw

    AIアニメに挑戦する人は、ぜひぜひ参考にしてみてください!

    ====

    限界その1:複数キャラクターを描くのが絶望的に難しい

    まず、今のAIが最も苦手とすること。それは「複数のキャラクターを一つの画面に収めること」です。

    ストーリー上、たとえば皇帝と部下が話すシーンや、主人公と敵が対峙するシーンなど、2人以上のキャラクターが同時に映るカットは絶対に必要になりますよね。

    画像
    (こういうカットが難しい!)

    これが、もう本当に「ガチャ」なんです。

    特に、2人のキャラクターが「向かい合っている」構図(over the shoulder)は、かなり苦労しました。

    静止画を生成する段階で、そもそも上手くいきません。

    キャラとカットによっては、50枚くらい生成しても、使える絵が1枚も出てこない、なんてことはザラです。

    ・キャラは破綻してないが、構図がなんかダサい(上の画像も結局使ってません)
    ・キャラクター同士が混ざってしまう
    ・表情の指示が逆になる(「片方は怒って、片方は笑って」と指示したのに逆になる)
    ・そもそも指示を無視したとんでもない絵が出てくる

    こんなことが頻発しました……。

    ぼくのプロンプト能力が低いのもあるんですが、根本的に難しいなという印象は拭えないですね。

    さらに、これを動画にすると、今度はキャラクターが合体したり、片方が消えたりするんです。

    「おーい、どこ行ったんだ!」みたいなことが、100円、200円と課金しながらガチャを回している最中に起こるわけで……。

    これは、正直、気が遠くなる作業でした。

    今回、ぼくの作品でも、2キャラが向かい合うシーンは、よく見ると破綻しています。

    画像
    (赤い月、光る剣、燃える松明、そしてキャラ2人……厳しいです。間違い探し)

    「向かい合うシーン」にかぎらず、そもそも2キャラ、あるいはそれ以上のキャラを動かすのはかなり難しいですね。

    できなくはないんですが、人を増やせば、オブジェクトを増やせば、構図を工夫すれば、それだけガチャの回数がかなり増えて、メンタルとクレジットと時間が削られていきますw

    これが、今のAIの大きな限界点ですね。

    もちろん、この問題も時間とともに解決されていくとは思います。

    恐ろしいことに、来月の今頃には、もう笑い話になっているかもしれません。

    実際、ナノバナナが先月出てきたときも「これがもっと早くあればクレジット無駄にしなかったのに!!」という感じでしたよねw

    ====

    限界その2:静止画生成AIごとの「クセ」が強すぎる

    AIアニメは、基本的に「静止画を生成し、それを動画にする」というプロセスで作ります。

    この、最初の「静止画生成」の段階で、やっかいな問題があります。

    それは、どのAIにも強烈な「クセ」があるということです。

    今回、ぼくは主にGoogleの「Nano-banana(ナノバナナ)」と、Bytedanceの「Seadream」という2つのAIを使いました。

    ナノバナナは素晴らしいAIなんですが、どうしても独特の「バナナ臭」とでも言うか……。

    アニメ絵については、「いかにもバナナで作りました」という感じの、ちょっと安っぽくてペラっとした絵になりがちなんです。

    画像
    (バナナくせぇぇぇ!)

    一方、後から登場したSeadreamは、「バナナ臭」がなく、キャラクターの感情表現なども非常に豊かで感動しました。

    しかし、SeaDreamにも「シードリーム臭」的なクセがあり、バナナ作画との差異が割と出てきてしまいます。

    画像
    Seedreamならでは

    そしてこちらは「2人以上のキャラクターを描かせると、途端に破綻しやすくなる」という弱点があります。

    結果としてどうなるかというと、「作品内でキャラクターの作画を統一するのが非常に難しい」という制約が発生します。

    今回の作品では、あるシーンはバナナで、別のシーンはSeadreamで、という風に使い分けるしかありませんでした。

    その結果として、よく見ると、キャラクターの顔つきがカットによって微妙に違っています。

    作画の微妙な変化はアニメ絵だとかなり誤魔化しが効くんですが、これは実写風のドラマ作品だとかなりの課題になるでしょうね。

    これも、AIのモデルがさらに進化すれば解決していく問題だとは思いますが、現状ではかなり悩ましいポイントです。

    ====

    限界その3:動画生成AIの使い分けが大変すぎる

    静止画を動画に変換するAIも、それぞれに得意・不得意があります。

    ・Midjourney

    安くて生成も速いのですが、炎や煙の動きがとにかく苦手です(ほぼ動かないし、破綻する)。

    ただ、こちらの指示(プロンプト)を良い意味で無視して、予想外の面白いカットを生み出してくれることもあります。

    ・Kling

    2.5にアップデートされ、安価に高品質な映像を出力してくれます。

    ただ、ところどころおバカというか、「いやそれは違うだろ」という映像も出してきますね。Midjouneyも同じですが……。

    「勢いのあるバトルシーン」はKlingが強いです(今だとVidu Q2もいいですね)。

    ・Hailuo

    特に、スローモーションで必殺技を繰り出すような「キメのカット」は、Hailuoが圧倒的に得意でした。

    劇的なスローモーションカットを作るならHailuo一択ですね!

    という感じで、結局、カットごとに

    「このシーンのこの部分はMidjourneyで」
    「この必殺技のカットはHailuoで試そう」
    「この俯瞰カットはKlingがよさそうだな」

    といったように、最適なAIを、手探りで使い分けていく必要があります。

    もちろん、試すたびにお金はかかります。

    今回の7分間のアニメで、最終的に使った動画ファイルは250個くらいですが、その裏では、おそらく800〜900個くらいの動画を生成しています。

    画像
    動画素材は253でした

    つまり、半分以上はボツになっているわけですね。

    さらにいうと「映像の動かし方」もAIごとに違うので、それがちょっとした違和感を生み出してしまうという課題もありますね……。

    Midjouneyは比較的カクカクしてますが、Hailuoはぬるぬる動くので、組み合わせ方によっては違和感が出ます。

    という具合で、「AIごとの特性を見極め、使いこなす」というのは、完全に制作者側のスキルと経験、そしてコストが問われる部分で、今のAIアニメ制作の難しさの核心とも言えます。

    さらに輪を掛けてややこしいのが、動画AI自体の進化スピードが早くて、キャッチアップするコストが高いんですよね……。

    道具がすごすぎるだけに、人間側の限界が試されてる感じがすごいありますw

    ====

    限界その4:画質が悪い

    そして、これが今のAIアニメにおける、ある種、最も決定的で、どうしようもない限界です。

    それは、「画質が悪い」ということです。

    現状、AIで生成する動画は、基本的に「SD画質」です。

    もちろん、技術的にはHD画質、なんなら4K画質で出力することも可能です。

    が、HDにするだけで、コストと生成時間が、軽く3〜5倍になります。4Kはやばそうですね……。

    「気軽にガチャを回しながらカットを生成して作品を作る」

    というAIならではの制作スタイルでは「高画質な作品は、できなくはないけどやりたくない」という感じです。

    30秒〜1分くらいの映像ならぜんぜんHDでもできるんですが、今回作った7分くらいの尺だと……いやー、やっぱりやりたくないw

    ましてや「30分アニメをHD画質で生成する」というのは、現実ほぼ不可能くらいで考えていいんじゃないかな……。

    SD画質であれば、スマホの小さな画面で見る分には、ほとんど気にならないかもしれません。

    でも、15インチのPCモニターで見ると「あー、これはもっと高画質で作りたいな……」と感じるのは否めません。

    こればっかりは、半導体レベルでの技術革新を待つしかないんだろうな〜と思います。

    プロユースの作品を作る上で、この画質の問題は、今後もしばらく大きな壁として立ちはだかるでしょう。

    いつか4KでAIアニメ映画が作りたい!!!

    ====

    まとめ:それでも、AIアニメの未来は明るい

    ここまで、AIの限界について無駄に熱く語ってきました。

    ・複数キャラの描写が難しい
    ・静止画AIの「クセ」が強い
    ・動画AIの使い分けが大変
    ・根本的に画質が悪い(基本はSD画質)

    他にも細かいところを言い出したらキリがないくらい、課題は山積みです。

    でも、ぼくは絶望しているわけではありません。

    むしろ、ワクワクしています。

    なぜなら、今日ぼくが語った限界のほとんどは、早ければ年末、遅くとも2〜3年後にはすべて解決されていると確信しているからです。

    AIの進化のスピードは、本当にすさまじい。

    先月まで「不可能だ」と思っていたことが、今月には当たり前になっている、そんな世界です。

    かつては、何億円というお金と、たくさんの専門家がいないと作れなかったアニメという作品。

    その制作のハードルが、AIによって着実に、そして劇的に壊されようとしています。

    ====

    ぼくが今回公開した『クォ・ヴァディス』という作品は、AIアニメの「今」の可能性と、そして「限界点」をすべて詰め込んだものです。

    ぜひ、このリアルな現在地を、あなたの目で確かめてみてください。

    そして、次はあなたが「作る側」になる番です。一緒に、この新しい創作の時代を楽しんでいきましょう!

    【フルAI短編アニメ「クォ・ヴァディス」を見る】


    あなたへのおすすめ