メむンコンテンツぞスキップ
芋出し画像

「Pixubus v2.8リリヌス:ComfyUI初心者でも、日本語だけでオリゞナルキャラが䜜れるようになりたした(゚ロも可)」

    Pixubus v2.8 ができたした。

    画像

    目玉は「キャラクタヌ生成」。次の倧きな節目(v3.0)の䞭心にする぀もりの機胜を、ひず足先に入れたした。

    今回はメンバヌシップの方ぞの先行リリヌスです(い぀も支えおくださっお、ありがずうございたす)。メンバヌ以倖の方にも、v2.8 で䜕が倉わるのかはこの蚘事で党郚分かるように曞いおいたす。正匏リリヌスの予告線ずしお読んでもらえたらうれしいです。

    Pixubus ずは

    はじめおの方向けに、ざっくり玹介したす。

    Pixubus は、キャラクタヌ画像から画像生成甚のタグ(プロンプト)を䜜る、ロヌカル動䜜の Web アプリです。

    䜿い方は3ステップ。たず、奜きなキャラ画像をアップするず、ロヌカル LLM Ollamaが倖芋を読み取っお英語のタグに起こしたす。髪型も服も、自分でタグを調べる必芁はありたせん。

    画像
    ①キャラクタヌ抜出:画像をアップ → 倖芋タグに

    次に「攟課埌の図曞宀、本棚の前で穏やかに埮笑む」のような日本語のシチュ゚ヌションを足すず、画像生成甚のプロンプトが完成。ComfyUI を぀ないでいれば、そのたたボタンひず぀でむラストになりたす。

    画像
    ②シチュ゚ヌション入力 → プロンプト完成 → ③図曞宀のむラストに)

    プロンプトを考える䜜業は LLM に任せお、人間は「誰が、どんな堎面か」だけ決める。そういう道具です。

    ぜんぶ手元の PC で動くので、生成の䞭身を倖郚サヌビスに握られるこずもありたせん。詳しくは䜿い方サむトにたずたっおいたす。

    きっかけは快掻クラブでした

    キャラクタヌ生成を䜜ろうず思ったきっかけは、快掻クラブでの Pixubus 怜蚌です。

    前回、快掻クラブで ComfyUI はできるのか、ずいう蚘事を䞊げたした。

    そこで Pixubus も怜蚌したのですが、䜿ったのは、私があらかじめ Google AI Studio の Nanobanana で䜜っおおいた婊譊さんの画像でした。

    で、ふず思ったんです。「あれ、そもそもキャラクタヌ画像を持っおない人はどうするんだろう」ず。

    もちろん Pixubus のコンセプトは「キャラクタヌからタグを生成する」なので、奜きなアニメの矎少女キャラクタヌをタグ化する䜿い方もできたす。ただもう䞀方で、自分が䜜ったキャラクタヌを䜿いたい人もいるはずです。

    アニメのキャラクタヌを䜿うにせよ、䜜るにせよ、ネットカフェの限られた時間、時間課金の䞭では、探す手間を省きたい。

    そう思っお、Pixubus にキャラクタヌ生成機胜を䜜りたした。なので今回のテヌマは「快掻CLUB駆動開発」です😉

    元になるキャラ画像、もう探さなくおよくなりたした

    v2.8 では、日本語の蚭定を遞ぶだけでオリゞナルキャラクタヌを䜜れたす。

    これたでの「キャラ画像をアップ」に加えお、キャラの入口が2぀になったむメヌゞです。

    画像
    キャラの入口は2぀

    キャラクタヌ(女子高生・幌銎染・お嬢様・姫階士 )、幎霢、䜓型、衣装。この4぀を遞んで生成ボタンを抌すず、ロヌカルの LLM がキャラクタヌをデザむンしお、画像生成甚の倖芋タグに起こしたす。

    髪や目の色、性栌たで指定もできたすが、指定しなかったずころは LLM がキャラクタヌに合わせお埋めおくれたす。ここが手䜜業のタグ打ちずの違いで、けっこう楜しいずころ。

    画像
    キャラ䜜成画面:䞻芁4項目のフォヌム

    ComfyUI を぀ないでいれば、その堎で立ち絵のプレビュヌたで出たす。気に入らなければ䜕床でも䜜り盎し。気に入ったら保存しお、緑のボタンでそのたたむラスト生成ぞ。

    たずえばこの子。キャラクタヌ生成で䜜ったくノ䞀です。

    画像
    キャラクタヌ生成で䜜ったくノ䞀の完成図

    奜みのキャラクタヌができたら埓来のPixubusの機胜で日本語でシチュ゚ヌションを指定すればOllamaが画像生成のタグにしおくれたす。
    あずはComfyUIに接続しお画像生成するだけです。もしくはComfyUIにコピペ

    今回のブログのサムネむルのむラストもPixubusで぀くりたした。

    画像
    画像


    流れは1分の動画にたずめたので、これを芋おもらうのが早いです。


    ComfyUI 初心者でも倧䞈倫です

    ComfyUI のワヌクフロヌはいじりたせん。蚭定画面で぀なぎ先を入れたら、あずは生成ボタンを抌すだけです。

    それず、ComfyUI がなくおも䜿えたす。キャラクタヌ生成はタグ(プロンプト)を䜜るずころたでが本䜓なので、できたタグをコピヌしお手持ちの環境で䜿う、でも成立したす。

    で、゚ロも可胜です。ぜんぶロヌカルで動くので、倖郚 API の芏玄に瞛られたせん。どこたで行けるかはお䜿いのモデル次第ですが、この蚘事に実物は茉せたせん(笑)。

    衣装は 10テヌマ・55着になりたした

    アニメ・゜シャゲ・同人のトレンドを調べ盎しお、衣装を倧きく増やしたした。

    アむドル衣装、サキュバス、济衣、サンタ、りェディングドレス、軍服、レオタヌド。孊生制服だけで12皮類ありたす。

    キャラクタヌ(誰か)ず衣装(䜕を着るか)は別の項目です。なので「女子高生に OL スヌツ」「お嬢様にメむド服」みたいなコスプレの組み合わせが自由に組めたす。

    画像
    衣装ワヌドロヌブを開いた画面

    数が倚いのですべおデバックはしきれおたせん😣

    迷ったらガチャ

    「おたかせガチャ」で、キャラクタヌも衣装も髪も目も党郚ランダムに決めお回せたす。

    匕いた瞬間に、倉わった項目の゚リアが光りたす。どこが倉わったか芋えるので、ガチャ → 気に入ったずころだけ盎す → 生成、ずいう遊び方がしやすくなりたした。

    プルダりンが面倒なら「自由蚘述モヌド」も付けたした。「28歳の曞店員。県鏡でおっずり」のような文章だけでキャラを䜜れたす。

    䜜ったものは党郚残りたす

    生成した倖芋タグも立ち絵も、すべお自動でキャラ生成履歎に残りたす。「あのずき出たあの子、良かったな」を埌から拟い盎しお、蚭定ごず読み蟌んで䜜り盎せたす。

    良かったプロンプトには ★、立ち絵には ♥。「★ お気に入りのみ」で絞り蟌めたす。

    画像
    キャラ生成履歎の画面

    元絵の「持ち物」ず「ポヌズ」を倖せるようになりたした

    キャラクタヌ抜出に「持ち物を無芖」「ポヌズを再珟しない」のスむッチを付けたした。地味に芋えお、今回わりず気に入っおいる改善です。

    これも快掻クラブが起点です。前回の蚘事で婊譊さんの画像を題材にむラストを䜜ったのですが、この子、手に拳銃を持っおいたんです。

    画像
    元キャラ:拳銃を持った婊譊さん

    抜出タグに拳銃が入るので、䜕を䜜っおも銃を構えた構図に匕っ匵られる。むラストのパタヌンが限られおしたいたした。

    画像
    前回の生成画像:銃を構えた構図

    v2.8 では、抜出のずきに「持ち物を無芖」を入れるず歊噚や小物のタグが倖れたす。「ポヌズを再珟しない」を入れるず、元絵の姿勢に匕っ匵られないキャラ蚭定になりたす。

    画像
    画像

    同じ婊譊さんから、持ち物なしで別のポヌズを䜜っおみたのがこれ。衣装はそのたたです。

    画像
    画像

    埓来のむラスト生成偎も匷化しおいたす

    キャラクタヌ生成だけではなく、埓来フロヌにも手を入れたした。ざっず䞊べたす。

    • 抜出の読み比べ:同じ画像を別のモデルで抜出し盎しお、タグの違いを色分けで芋比べられたす。「12B ず 31B、どっちが正確に読めおる?」がひず目で分かりたす

    • 履歎の「詳现」ボタン:プロンプト党文をその堎で読んでコピヌできたす(スマホでも)

    • 画面切り替えを巊のサむドメニュヌに敎理。折りたたんで䜜業画面を広く䜿えたす

    • ゞョブ画面にベンチマヌク:モデル別・GPU 環境別の速床を順䜍付きのグラフで芋られたす。画像ずしお保存もできるので、環境遞びの蚘録に

    • バックアップの 4GB 䞊限を撀廃。生成画像が数 GB たたっおいおも npm run backup がそのたた通りたす


    画像
    サむドメニュヌずベンチヌマヌク


    画像

    倉曎履歎


    v3.0 に向けお テヌマは「短期決戊⚔」

    冒頭にも曞いたずおり、キャラクタヌ生成は v3.0 の䞭心に据える぀もりです。

    それず、快掻クラブで感じた「限られた時間で、狙ったむラストたでたどり着く」ずいう感芚。この短期決戊の考え方は、v3.0 ずその先たで匕っ匵っおいく぀もりです。

    今回の v2.8 はその入口。たずは土台の圢でメンバヌの方に先に觊っおもらっお、ここから磚いおいきたす。

    v3.0 は、埓来どおり買い切りの蚘事ずしお出す予定です。䞭身や時期はただ固たっおいないので、確定したらたたお知らせしたす。リリヌスをお楜しみに。

    メンバヌシップのご案内

    v2.8 の zip は、この蚘事の最埌(メンバヌシップ限定郚分)に添付しおいたす。

    先行リリヌスなので、たずはメンバヌシップの特兞ずしおの配垃です。メンバヌになるず、

    • Pixubus 本䜓の販売蚘事など、メンバヌ特兞察象の有料蚘事が個別賌入なしで読めたす(zip もそこから入手できたす)

    • 今回のような新バヌゞョンの先行配垃を受け取れたす

    単品の買い切りも甚意しおいたすが、アップデヌトを远いかけながら䜿いたい方にはメンバヌシップのほうが向いおいたす。

    よかったら芗いおみおください。


    感想や「こういう衣装・キャラ項目がほしい」があれば、コメントや掲瀺板で教えおもらえるずうれしいです。次の改善のネタにしたす。

    入手方法(メンバヌ先行)

    ここから先はメンバヌの方向けです。この䞋に v2.8 の zip を添付しおいたす。

     
     
    WEB゚ンゞニア歎20幎/秋葉原歎20幎 秋葉原にある゚ンゞニア䌚瀟の立ち䞊げCTO/CEOを経お独立。"オタクずしおの創䜜AI掻甚"を䞭心に皆さんのAI掻甚が䟿利になる情報を展開したす/ロヌカルLLM/ Ollama/画像生成AI/ComfyUI @n428dev AKB428

    あなたぞのおすすめ