メインコンテンツへスキップ
見出し画像

【ChatGPT×ImageFX×sora×SunoAI×Power Directer】動画作り:初心者による初心者のための軌跡(全スマホ)


    以前の記事で紹介した「いまーじなりー動物園」ですが、子供に見せたところあんまりにも子供たちが喜んでくれて、トレンドさん周辺には動物園ブームが訪れました。

    子供は動物を見て喜び、トレンドさんは子供達を見て癒される。

    まさにwin-win!

    そうしてできたのがこれだ!!

    荒削りですが、ぜひ見てあげて感想をもらえたら嬉しいです。
    そしたらもっと良い何かができるかも!?

    画像
    没作のアリクイピザ職人
    こんな感じをいろいろ組み合わせてます。


    幼稚園の子供達の指示に従って作ったので1番は荒削りで2番からだんだん歌に合わせる感じになってきてます。

    制作期間は5日程度ですが、こんな短期間で成長する子供達にもびっくり。

    そして、どうしてもプリキュアはでてこないと気がすまないのね…


    今回は、「動画見てみて!」がメインですが、作った方法を簡単に記載します。

    すべてスマホで行っており、初心者による初心者のためものなので、ガチの動画編集や、生成AIに慣れてる方にはもの足りないと思います!

    記事が良いなと思ったら動画見てみて感想を教えていたたければ幸いです。

    作り方 ゼロ:自分のチカラ

    トレンドさんの仕事はAIへの指示だしです。

    AIへの指示はざっくりすればするほどランダム性が高くなるので、ある程度の一貫性を保持するためにはある程度詳細なプロンプトが必要。

    ChatGPTにプロンプト自体を繰り返し検証してもらうことで一貫性など高めることができるので、AI好き初心者の仲間は一度プロンプトエンジニアリングを改めて勉強してみると面白いんじゃないかと思います。

    といってもトレンドさんも勉強の仕方が分からなかったのでOpen AI Deep Researchで海外文献も調べて考察して教えてもらいました。

    ●プロンプトエンジニアリングを勉強
    ・具体的で明確な指示
    ・過去の会話を考慮するかどうか(推論を促すかどうか)
    ・回答の形式を指定するかどうか

    +上記に加えて
    ・Chain of thought(段階的思考)
    ・Few-shot(例の提示)
    ・Recursive(再起的:AI自身による出力の繰り返し評価)

    プロンプト自体の精度をあげることでより良いものを。
    そのためにはトレンドさんも進化が必要

    作り方 ①:ChatGPT

    ①何を作りたいかを覚えてもらう
    ・ImageFXのプロンプトを作りたい
    ・リアルな動物の形態を保持すること
    ・ユニークなシチュエーションであること
    ・生成した画像をsoraで動画化したい

    ②プロンプトの作り方を学習してもらう
    (ChatGPTの基礎学習は2024年6月までの情報(最近更新した様子)なので、soraとかあまり知らなかったりする)
    ・ImageFXの最適なプロンプトを学習して
    ・soraの最適なプロンプトを学習して

    会話の下地を作っておくと、過去の会話の考慮(推論)を促せばある程度伝わってる感じになります。

    ③プロンプトを作ってもらう。

    リアルなアヒルのアイドルが踊っているシーン。動物の自然な形態は保持しモーションブラーをつけてください。過去の会話を考慮し、5回比較検証したうえで、最適なものを最終稿として出力してください。

    実際にChatGPTにお願いしたプロンプト
    画像
    画像
    実際の出力(中略)

    子供達の指示はざっくりしているので、それに答えられるように、会話の下積みさえしておけば、あとはAIさまさま。

    ImageFXで納得がいく画像ができたら

    この画像を動かします(添付ファイル)。sora用にプロンプトを作成してください。アイドルステージで楽しそうに歌い踊っている感じでお願いします。これまでの会話を考慮し、5回比較して最適なプロンプトを出力してください

    とSora用も作る。

    「モーションブラーはSoraでここ動かしますよって合図になって動かしやすくなる。」

    と書いてる人がいたのでお守りでつけてます。

    Soraへのプロンプトが雑だと、モーションブラーを置き去りにして動くことも多いのでホントにお守りです。

    作り方 ②:ImageFX、Sora

    ChatGPTで作ったプロンプトをぶち込むだけの簡単なお仕事。

    ①ImageFX
    動画の元となるイメージ作り。納得のいくものができたらsoraへ。出来なければ手作業プロンプト編集かChatGPTへ。

    画像

    ②Sora
    ImageFXで作った画像に、ChatGPTで作ったプロンプトをつけて生成。

    一発で10秒納得できるものはそうそう出来ない。

    Recut(部分的に残して再生成)や、一度保存してRemix(動画をプロンプト方向に改修)してさらにRecutなど繰り返す。

    画像

    Recutが簡単だったので私は多用しました。
    blendは私はまだ上手く使えない。プリキュ◯作る時に背景いじるのに使えそうだったけど、強度もよく分からないので勉強不足。

    動画の前後に気に入らない部分がある。スローすぎる、早すぎるなどは、後述のPower Directerやスマホの編集でいじれるので妥協ポイント。

    作り方 ③:Suno AI

    無料の場合、歌詞(lyric)と曲調(style of music)をいじるだけの簡単なお仕事。
    意外と良いものができるので1日10曲の更新が待ち遠しくなる。

    でもゼロから考えるのは大変なのでChatGPTさんに手伝ってもらう。

    ・ChatGPTにSuno AIのプロンプトやメタタグについて勉強してもらう。
    ・歌詞にも韻やらリズムやらルールがあるのでそれも確認してもらう。
    ・日本語の確認がChatGPTは下手なのでまずはローマ字表記で歌詞を作ってもらって、評価。
    ・曲調はどんなのが良いか伝えて、メタタグ、歌詞に反映してもらう。

    AI生成で作った幻想的な動物園ですハリネズミのボクサーや象の時計細工士、ハムスターのスキーヤーなどがいます。この情報を含みつつ、過去の会話を考慮し、評価しやすいようにまずは歌詞のみをローマ字で作成してください。韻やリズム含め、5回検証し最も最適なものを出力してください。

    こんな感じで作り始めた。

    最終的なプロンプト

    [Genre: J-Pop, Anisong, Theatrical Pop]
    [Tempo: 160 BPM]
    [Key: C Major]
    [Instruments: Piano, Synth Leads, Strings, Electric Guitar, Drums, Cute Chimes, Clapping Sounds]
    [Emotion: Magical, Cute, Heroic, Uplifting, Energetic]
    [Vocal Style: Bright, Cheerful, Powerful, Idol-like Harmony]
    [Structure: Choir Call - Narration - Verse - Pre-Chorus - Chorus - Interlude - Chorus - Outro]
    
    [Intro: Full Choir, Cute & Energetic]
    Clap! Clap! みんなで Clap!  
    "おいでませ~!!ワクワクするよ!!"
    3, 2, 1… 
     Enjooooooy!!
    
    [Prelude: Narration Fast Speech, Playful & Rhythmic]
    "ナマケモンが 足トリ舞う!!"  
    "噛んだウマは しまいも噛む?"  
    "鳴くセミより 光るホタル!!"  
    "ナゾナゾだよ イマージンZuuuuuu!!"  
    
    "さぁ、キラめく世界へ! 始まり始まり~っ!!"  
    
    [Verse 1]
    よってらっしゃい みてらっしゃい!  (おいでませ~★)  
    門をくぐれば 夢の国  
    星がきらめく 夜の空  
    みんなワクワク はじけるぞ!  
    Oooooo!! 
    [Pre-Chorus - Bouncy Melody, Fun & Magical]
    ハリネズミが こぶしを打つっ!  
    ゾウのトキが きざみつける!  
    ハムスターが シロガネ舞う!  
    (しんじられる?ドキドキ!)
    [Chorus - Cute & Idol-like Harmony]
    Enjoy!  joy!!(joy!!!)  
    joy!!(joy!!!) joy!!(joy!!!)  
    ツバサを手に 入れたんだa 
    aaa(パパパーン🎶) 時間を 置き去った!
    チカラを手に 入れたんだa
    aaa(ふわふわ🎶)  学びは キラキラだ!
    ゲンジツも ゲンソウも  
    ゲンカイも ユメウツロ  
    さぁさぁみなさんご一緒に!  
    enjooooooooooy!!
    
    [Verse 2]
    いってらっしゃい きてらっしゃい!(おいでませ~~★)  
    門を閉じれば 僕のシロ 
    お部屋かざるの バグのイロ 
    こいつらこそ ボクのトモ!  
    Oooooo!! [twinkle sound]
    [Pre-Chorus - Bouncy Melody, Fun & Magical]
    ライオンたち いろどるニジ !
    フクロウたち かたらうトキ ! 
    ペンギンタチ 子なすキセキ !
    (かんじられる?ワクワク!)
    [Chorus - Even More Powerful]
    Enjoy!  joy!!(joy!!!)  
    joy!!(joy!!!)joy!!(joy!!!)  
    理想を手に入れたんだ  
    aaaaa (キラキラ~🎶)  ユメジはおしまいに  
    希望を手に入れたんだ  
    aaaa (ジャンプ!🎶)  ステキはトビキリに!
    ゲンダイは ゲンキンな 
    ゲンエイが ケンゲンさ  
    さぁさぁみなさんご一緒に!  
    enjooooooooooy!!
    
    [Interlude: Soft & Magical]
    Shhhhhhh…(ヒミツの時間…)  
    "難しいことは置いておこっ"  
    "今こそ今を楽しもう!!!!!" 
    Ooooooo!![twinkle sound]
    
    [Last Chorus - Grand & Heroic]
    Enjoy!  joy!!(joy!!!)  
    joy!!(joy!!!)  joy!!(joy!!!)  
    学びはインフィニティだ
    (joy joy joy!)  
    学びのセレクト学ぶんだ 
    (joy joy joy!)  
    
    [Shout - Super Exciting!]
    joy!!(joy!!!)  joy!!(joy!!!) joy!!(joy!!!)  [twinkle & jump sound]
    
    
    [Narration Ending - Playful]
    "エーアイ?"  
    "ネコにコバン?ブタに真珠?"  
    "サルヂエで尻尾にのるな!!"  
    "でもきっとそう、サイオウがマ!!!!"
    
    🎶 そぅそぅトラの巻を開くんだaaaa!!!! 🎶  
    
    [Final Gospel Crescendo] "Enjooooooooooy!!"  
    "エーアイ!!!!"
    [End]

    styleは「J-Pop, Anisong, Theatrical Pop」だけ。

    作り方 ④Power Directer

    無料でこれだけいじれれば充分な機能がある。ウォーターマーク入るけどね。
    ここは直感的な操作が可能で触ったほうが分かりやすいので割愛。

    画像

    歌詞を入れたり、カットイン(オーバーレイ)いれたり、効果音いれたり。

    まとめ

    どう?みんな出来る気がしてきたでしょ?

    特に世の中のパパママ必見。子どものツイートが動画にできちゃいますよ!


    ところでトレンドさん、ホントはセンシティブな画像を動画まとめにしたかったんだけど………

    やっぱ裏アカみたいなの作って動物園と分けたほうがよいよね?

    男の娘とおじさんのように2面性に揺れ動くトレンドさんでした。

    それでは良い生成ライフを!

    またどこかで!!

     
     
    はじめまして、トレンドさんだよ!ChatGPTを駆使し、最新のAI技術や日常の発見を模索中。今はimageFXにハマってるよ。

    あなたへのおすすめ