ゲームに登場するボス動画を制作｜制作フロー｜Pollo AI｜たくさんのモデルを試行錯誤して頭抱えた話

みなさん、こんにちは～(｡･ω･｡)ﾉ💗

ZarGates様から
「ボス制作イベントに参加しませんか？」
という、一件のDMが届き…

今回の制作が始まったきっかけは
Tales of ValdirのBOSS制作イベントへの招待でした✨

主催者から、直接お声がけいただき
「せっかくなら、自分にしか作れないBOSSを作りたい！」
と、参加を決意∑d(d´∀`*)ｸﾞｯ！🌸✨

ウォーターマーク禁止なので…悩みましたが
Pollo様にお話して、なんと！協力していただけることに😭✨
ありがとうございます(* ᴗ͈ˬᴗ͈)💗✨

あっ！と、思い出したのが、以前から描いていた顔のない異形です。
（私のお気に入りでカッコいい異形さん）

一枚のイラストだった異形を、本当に戦えるゲームBOSSへ！

Pollo AIを使った試行錯誤が始まりました(｀･ω･´)ゞ✨

今回は、私が制作した「異形BOSS」の
制作フローをまとめていきます(,,•ω•,,)و🌸

今回使用した、機能とモデルです！

💎「Wan 3.0」
💎「Seedance2.5」
💎「リファレンスから動画へ」
💎「テキスト読み上げ」

私が、いつも使用しているAIとアプリです📱💻

◽nijijourney・Midjourney（イラスト）
◽ChatGPT（プロンプト）
◽Tad.ai（音楽生成AI）
◽Pollo AI（動画生成）
◽CapCut（動画編集）

一緒にチャレンジしてみない？

モバイル版もございます👇🌸

まずは、作品からどうぞ👇🌸

今回目指したのは、ただ綺麗なAI動画を作ることではありません。

そのため、ひとつの動画生成モデルだけに頼るのではなく
Pollo AIの中でいくつかのモデルを実際に試しながら
作品との相性を確認していきました！✨

結果として制作の基盤に選んだのが、「Wan 3.0」です！
ふふっ…意外でしたか？？

「Seedance2.5」だろう！って思った方々！
「Wan 3.0」もいいモデルでしたよ( *´艸｀)💓✨

完成するまでには
かなりの試行錯誤がありましたよ(｡•́ – •̀｡)ｼｭﾝ…

まずは「異形」をBOSSにする

今回のBOSSは、この企画のためにゼロから考えた
キャラクターではありませんヾ(〃^∇^)ﾉ

以前から私がイラストで描いていた「異形」をもとにしています！

顔がなく、人間に近い姿をしているのに、明らかに人ではない。

首元からは黒く深い赤を含んだ靄が揺らぎ
身体には傷跡が残っている。

私の中にすでに存在していたこのキャラクターを
今回は「ゲームのBOSS」として動かしてみることにしました✨

一枚のイラストとして、成立することと
動画の中で同じキャラクターとして
動き続けることは、別問題です。

そこで最初に用意したのが、異形のキャラクターシートでした。

正面だけではなく、横や後ろから見た姿も含めてデザインを整理。

動画生成AIが角度を変えても「同じ異形」と認識しやすいように、まず静止画の段階で情報を固めていきました。

これは今回、かなり重要な下準備になっています。

プレイヤー側には、マリヤを配置

BOSSだけでは、ゲームのBOSS戦にはなりません。

対峙するプレイヤーとして登場させたのが
私のオリジナルキャラクター「白銀マリヤ」です。

今回は普段の姿ではなく、女聖騎士としてデザインしました。

こちらもMidjourneyを使用し
動画生成に入る前にキャラクターシートを作成しています。

AI動画では、カットが変わった瞬間に顔や衣装が
変化することがあります。

カメラを頻繁に切り替える作品では、それが大きな問題になります。

だからこそ、

この順番を大切にしました( ㆆ-ㆆ)و✨

舞台は、神聖なダンジョン

次に考えたのがフィールドです！

異形の不気味さを強調するために
最初から暗く禍々しい場所にする方法もありました。

私は、あえて逆にしました✨

選んだのは、白い大理石や巨大な柱が並ぶ神聖なダンジョン。

美しく、静かで、どこか人を寄せつけない空間です。

そこに異形が存在することで…
ただ暗い場所に怪物を置くよりも、その存在だけが異質に見える👀✨

そんな対比を狙いました。

緊急クエスト風でもあります🤣🤣
異常事態を狙う感じ！✨

そして、このダンジョンが簡単な場所ではないことを
一瞬で伝えるため、最下層を守る存在として
巨大な黒竜を配置しました！💗

黒竜そのものを主役にしたかったわけではありません。

「ここまで辿り着くこと自体が簡単ではない」

それを説明ではなく、画面だけで感じてもらうための存在です。

強大な黒竜がいる。
さらに異形が登場する。

この順番によって、BOSSの危険度を台詞で説明しなくても
見せられると考えたんです( *´艸｀)💓✨

どの動画生成モデルを使うか

素材が揃ったところで、Pollo AIを使った動画制作に入ります。

ここで最初から「Wan 3.0」で全部作ろうと
決めていたわけではありません(￣▽￣;)💦

「Seedance 2.5」や「MiniMax H3」なども実際に試しています。

というのも、今回もっとも怖かったのが、

実写のようになりすぎても違う。

逆にアニメへ寄りすぎても、
今回目指しているゲーム映像から離れてしまいます。

キャラクターを維持できても、質感が違えば
同じ作品には見えません(；´･ω･)

物凄く頭を抱え、何度もやり直ししました😂
いや！本当に初心者に戻った感じです(￣▽￣;)💦

実際に試してみると、Seedance 2.5は安定感がある一方…
今回の異形のような、特殊なキャラクターを扱う場面では
すごく苦戦しました💦

MiniMax H3も試しましたが、異形さんはほとんど
人物の質感がリアル方向へ寄りすぎる…。

これはモデルの良し悪しではなく
今回作りたい作品との相性のお話です。

いくつか試した中で、私が求めていたセミリアルな
ゲーム映像の質感と噛み合ったのが「Wan 3.0」でした。

そこで途中から、

と方向を固めました。

AI動画では「一番新しいモデルだから使う」ではなく
自分の作品の絵柄を守れるモデルを選ぶことも大切だと感じています。

クレジットがぁ～～(｡>﹏<｡)💦 って！！！
そこのお悩みのあなた(*´Д｀)💕

Pollo AIさん、Xでコンテストを
開催していることがあります🌸✨
要チェックです(｀･ω･´)ゞ💗
(※先着早い者勝ちなので、チェックしましょう)

「動画」ではなく「ゲーム画面」として考える

使用するモデルが決まったあと、次に意識したのが見せ方です。

参加すると決めてから、頭の中に置いていたのは
ずっとPS5のようなゲーム映像でした。
（モンハンのOPなど、見せ方も参考に…）

キャラクターを中央に置いて動かすだけでは
ゲームのイベントムービーらしくなりません。

動作そのものと同じくらい
カメラワークとカットインを大切にしています🌸✨

◽聖騎士マリヤがダンジョンを歩く。
◽床すれすれから捉える。
◽視線の先に敵がいる。
◽剣を構える。
◽場面を切り替え、異形の存在を見せる。
◽そして戦闘へ。

ひとつの長い映像をAIに任せるのではなく、

「この数秒で、観ている人に何を感じてもらうのか」

をカットごとに決めて生成していきました。

迫力が必要なところでは距離を詰める。
異形の恐ろしさを、見せたいところでは
異形そのものを主役にする👑

逆に、世界の広さを見せたいところでは
キャラクターだけを大きく映さない。

こうしてカメラの役割を変えていくと
短いカットをつないだ時にも映像に緩急が生まれます🎥✨

今回の制作では、プロンプトの内容だけではなく
「どこから見せるか」も演出の一部でした(｀･ω･´)ゞ

異形は、AIにとって簡単なキャラクターではなかった

今回、特に難しかったのが異形さん…(；´･ω･)

人間のような身体を持っているのに、顔が存在しない。

さらに首元から靄が揺れている。

普通の人物とは構造そのものが違います。

生成を重ねる中では、異形が思うように映らなかったり
顔が勝手に生成されたりと…
イラストに忠実すぎることもありました(￣▽￣;)💦

プロンプト公開ですヾ(o´∀｀o)✨
ご参考までに…

といった、絶対に崩したくない特徴を明確にしていきました。

AIに全部を察してもらうのではなく
作品にとって重要な情報ほど、こちらから優先順位を渡す。

この調整を繰り返しています。

音楽はTad、声はPollo AI

映像が形になったら、次は「音」です。

BOSS戦なので、音楽は作品の空気を大きく左右します。

今回はTadで楽曲を制作しましたが
テキスト読み上げには使用していません。

キャラクターの声は、Pollo AI内にある
テキスト読み上げ機能を使いました👇
（※オーディオの下にあります）

ここでも、一度決めた声をそのまま全編に当てたわけではありません。

場面や台詞に合わせて声のニュアンスを変更しながら
映像に合うものを探しています。

同じ文章でも、声が変わればキャラクターの印象はかなり変わります。
ピッチの変更も可能なので、高い声ならマイナスにして
声を低くどっしりとした感じに出来ます！✨💗

特に異形の場合、感情を乗せすぎると「人間らしく」なってしまう。

逆に無機質すぎると、このBOSSが
背負っているものまで薄くなってしまう。

映像だけではなく、声でもその境界を探りました。

台詞は「足す」より、最後に「引く」

最初は、入れたい台詞がいくつもありました✨

💭異形が何を考えているのか？
💭なぜ攻撃するのか？
💭何を理解できないのか？

設定を作り込んでいるほど、どうしても喋らせたくなります。

でも実際に映像へ入れてみると…
全部を説明するほど世界観が狭くなっていきました💦

そこで最後に行ったのが、台詞の引き算です。

必要な台詞はいったん入れる。

映像と合わせる。

そして、なくても伝わるものを削る。

言葉で説明するより、表情、間、音楽
カメラで感じてもらえる部分は残さない∑d(d´∀`*)ｸﾞｯ！🌸

今回の異形は特に、すべてを語らない方が
不気味さも悲しさも残りました！ｳﾝ(-ω-)(-ω-)ｳﾝ

これは完成直前まで調整した部分です。

CapCutの編集で映像をひとつにする

AIで各シーンを生成したら、最後はCapCutで編集しました。

ここでは大きく作品を作り直すというより、生成した素材を
ひとつの映像として成立させるための微調整を行っています💻

カットのタイミング。

音楽と映像が切り替わる位置。

台詞を入れる間。

字幕。

数秒ずれるだけでも、攻撃の重さや緊張感は変わります。

AIが作った映像を並べれば完成、ではありません。

最後に人間側で「どこを見せて、どこで切るのか」を
決めることで、ようやくバラバラだった生成素材が
ひとつの作品になりました(*´ω`*)🎥✨

作ってみて、一番感じたこと

キャラクターシートを作り、フィールドを用意し
Pollo AIで複数の動画生成モデルを試し
Tadで音楽を作り、Pollo AIで声を加え、CapCutで仕上げる✨

こうして書くと、たくさんのAIやツールを
使った作品に見えるかもしれません。

でも、私が一番大切だと感じたのは、ツールの数ではありません。

Seedance 2.5が悪いわけでも、MiniMax H3が悪いわけでもありません。

今回の世界観には「Wan 3.0」が合った。

だから選びました(-□д□-)✨

台詞も、たくさん考えたから全部使うのではなく
世界観を守るために削りました。

カメラも、格好いい動きを生成することだけを目的にせず
「ゲームとして見た時にどう感じるか」で決めました🎮

AIは、こちらが選択肢を渡すほど
色々なものを返してくれます(っ•ω•´)っ_/🔎✨

だからこそ、最後に必要なのは
「これは私の作品に必要なのか？」
と、選び続けることなのかもしれません。

一枚のイラストだった異形が、キャラクターシートになり

神聖なダンジョンに立ち

黒竜を越えた先で、聖騎士マリヤと対峙する…

そして、実際に動き、声を持ち
ひとつのBOSSとして画面の中に存在する。

ずっと、頭の中にいたキャラクターが
ゲームの中から出てきたように動いた瞬間…

これは、作ってきた本人だからこそ
余計に感じるものかもしれませんが
「異形さん、本当にBOSSになったな…」と思いました✨

試して、失敗して、モデルを変えて
プロンプトを直して、また生成する。

その繰り返しでしたが
その試行錯誤まで含めて今回の作品です( ˶ˊᵕˋ)੭🌸✨

もう一度どうぞ…👇💗

Pollo AIのように複数の動画生成モデルを
ひとつの場所から試せる環境だからこそ‼‼
「このモデルで作らなければいけない」と決めつけず
作品に合う表現を探すことができました(๑•̀ㅁ•́ฅ)✧

AIに作品を決めてもらうのではなく、
自分が作りたい世界のために、AIを選ぶ。

今回の異形BOSS制作で、改めて感じたことです(*´ω`*)💓

YouTubeでたくさん動画あげてるよ🎥
登録よろしくね～～(=ﾟωﾟ)ﾉ✨

Pollo AI様の記事をマガジンで
まとめたのでお時間ある時、他の記事もどうぞ！
制作フロー紹介しております✨

Pollo AI

新モデルが続々とリリース‼‼✨

Pollo AI様

YouTube

最後まで見てくれてありがとう🌸

私もまだまだ勉強中の身です✨
皆様のお声をお聞かせください！💓✨

#つづけたDay
#３日間チャレンジ
#生成AI
#画像生成AI
#動画生成AI
#繊細さん
#note毎日投稿
#毎日投稿
#振り返り
#記事
#AIイラスト
#アート好きと繋がりたい
#白銀の髪同盟
#紹介
#AIイラストアイラ
#PolloAI
#pollo
#創作あそびUP系
#アカリウム
#白銀マリヤ