メインコンテンツへスキップ
見出し画像

【ComfyUI】LTX2.3リップシンクをちょっと便利に!- 空白秒数で演技を制御 -

    【1】LTX2.3でリップシンクをちょっと便利に

    LTX2.5が出たのに、まだLTX2.3を使うのか?はい、使います。
    まだ、LTX2.5では私がやりたいことをやるための環境が整っていない、特に紳士系が少なすぎて話にならん。
    なので、環境が整うまではまだLTX2.3かなと。
    MinimaxH3という選択肢もあるにはあるがいかんせん生成速度が遅い。

    で、リップシンクは必須なので使っているのだが、リップシンクの前後に空白の秒数を入れたい。
    空白の秒数で喋る前に動かしたり喋った後に動かしたりしたい。
    音声側で空白秒を作るという方法もあるがそれはそれでメンドクサイし、あーやっぱりもう少し空白短くとか長くしたいってときに融通が利かない。
    なにより、音声をIrodoriTTSで作っているので、出来上がった音声をわざわざ別のソフトで編集するのもメンドクサイのだ。

    ということで、Workflowで自由に設定できるようにしてしまえと言う話だ。

    【2】作ったワークフロー(Workflow)

    画像

    できることは画像と音声データを入れるとリップシンクした動画を作れる。
    そこにしゃべる前後に空白を作ってしゃべる前の動きを作ったりしゃべった後の動きを作ったりできるようにした。
    動きは動画の秒数とプロンプトで作るのでその辺は使う人の腕次第。

    【3】実際に使ってみる

    画像

    女の子が手を振ってセリフ喋って最後に笑顔でお辞儀ってプロンプトに書いた。[]の中はどの秒数で何をするかってことね。

    画像

    で、しゃべらせる音声の前後に4秒ずつ空白を入れて

    画像

    この子にしゃべらせるよ。
    で、一発でできたのがこれ。

    髪の毛とか、最後のお辞儀とか変なとこはあるけど、お試しなので。
    実際に作るときはここから微調整かなと。

    こんな感じで、しゃべる前後に動きをつけたいときには便利だと思う。

    今回使ったLTX2.3ia2vblanktimeV1はここからダウンロードできます。
    ↓↓↓ 「LTX2.3ia2vblanktimeV1」のダウンロード ↓↓↓

    【4】「LTX2.3ia2vblanktimeV1」のダウンロード

     
     
    毎日が暇。 暇は自由だ、やりたいことだけで生きていける。

    あなたへのおすすめ