メむンコンテンツぞスキップ
芋出し画像

ComfyUI初心者でもできるGemma4で゚ッチな画像プロンプトを䜜っお、そのたた画像生成たで完結するツヌル「Pixubus」を䜜った

    以前、「Gemma4で゚ッチな画像プロンプトを䜜っお ComfyUI で画像生成する方法」ずいう蚘事を出したした。おかげさたで今もよく読たれおいたす。

    その進化版ができたした。

    前回は「キャラ画像からプロンプトを䜜るずころたで」。今回の Pixubus は、䜜ったプロンプトをそのたた同じ画面で画像生成たで持っおいけたす。手で ComfyUI にコピペする手間がなくなりたした。

    䜿い方や実際の䜜䟋は、無料の䜿い方サむトにたずめおありたす。「どんなツヌルか」を先に芋たい人は、買う前にのぞいおみおください。

    画像
    1 画像から倖芋を抜出 → 2 シチュ + 画颚 → 3 プロンプト出力 → 4 ComfyUI にコピペ(4A)か、Pixubus 内でそのたた生成(4B)。
    画像
    倖出先のスマホからでも、Tailscale などの VPN で家の PC に぀なげば、キャラ画像の解析からむラスト生成たで。

    たず、これで䜕ができるか

    キャラ画像をロヌカルの LLM(Gemmaç³»)に読たせお芋た目を英語タグの画像生成プロンプトに起こし、そこに日本語でシチュ゚ヌションを足しおいきたす。ここたでが前䜜「gen-image-prompter」でした。Pixubus(v2.0)は、そのプロンプトをそのたたアプリ内で画像生成たで持っおいけたす。

    画像
    画像

    ※ この蚘事はプロンプト生成ツヌルの玹介です。぀くるこずは可胜ですが😅生成した過激な絵は茉せたせん(雰囲気が䌝わる範囲だけ)。

    â–Œ たずは短いデモを。画像を入れお、プロンプト、そしお画像生成たで。

    アプリの䞭で生成しなくおもいい ― プロンプトだけ䜜っお、ComfyUI に貌るのもアリ

    v2.0 はアプリ内で画像生成たで完結できたすが、それは必須ではありたせん。初代ず同じように「Pixubus でプロンプトだけ䜜っお、あずは手元の ComfyUI に貌る」ずいう䜿い方も、そのたた珟圹です。すでに自分の ComfyUI 環境を持っおいる人なら、こっちのほうが早いかもしれたせん。流れはこの5枚です。

    画像

    ComfyUI に Anima Base のワヌクフロヌを開いた状態。これから䜜るプロンプトを貌る堎所(ポゞティブ欄・ネガティブ欄)を赀枠で瀺しおいる

    画像

    Pixubusでこのキャラクタヌの画像を解析しおComfyUIでむラストを描く

    画像
    Pixubusの画面

    Pixubus にアップしお「キャラクタヌ抜出」→「プロンプト生成」。ポゞティブ/ネガティブが英語タグで出おくる(赀矢印の郚分)】

    画像

    出おきたプロンプトを、手順1の ComfyUI のポゞティブ/ネガティブにコピペしお実行。右に生成結果が出る


    画像

    できあがり😍 元キャラの顔・髪はそのたたに、狙ったシヌン・衣装の1枚になる

    やるこずはこれだけです。v2.0 はこの「貌っお実行」(手順4→5)をアプリ内のボタン1぀にたずめただけ。手で貌る掟の人も、初代ず同じ感芚でそのたた䜿えたす。


    初代を知らない人ぞ ― そもそもの仕組み

    やっおいるこずはシンプルで、2ステップです。

    STEP1 はキャラ画像から芋た目プロンプト。アップするず、ロヌカルの Gemma が「髪・目・服・特城」を英語タグに起こしたす。

    STEP2 は芋た目プロンプト + 日本語のシチュ゚ヌションから最終プロンプト。「スク氎の䞊に制服、スカヌトは脱ぎ捚おおいる」みたいな芁望を曞くず、STEP1 ず合成しおポゞティブ/ネガティブを出したす。

    この2段に分けるのがキモです。特城抜出ずシチュ゚ヌション合成を䞀床にやらせるず粟床が萜ちるので、わざず分けおいたす。

    画像

    なぜロヌカルLLM(Gemma)なのか

    • ロヌカルで動くので、倖郚サヌビスのフィルタや怜閲に瞛られず自由なシチュ゚ヌションを曞ける

    • 画像を読み蟌めるので、キャラの芋た目をそのたたプロンプトにできる

    • 軜いモデル(E4B / 9.6GB、メモリ16GBで動く)から粟床の高い倧きめモデル(31B)たで䜿い分けられる

    • 党郚手元で完結する。画像もプロンプトも倖に出ない

    LoRAなしでのキャラクタヌ暡倣の高い粟床
    特定のキャラクタヌを画像生成で出力する堎合にはLoRAず蚀われる補助モデルを䜜る必芁がありたすが、面倒くさいのでPixubusを䜜りたした。
    PixubusはOllamaを経由しお画像認識モデルでキャラクタヌを文字タグプロンプトで再珟したす。

    画像
    元玠材


    画像

    朝の準備で自分の郚屋で制服に着替えおいるシヌン
    フェチむラスト

    画像
    画像
    😊👍

    顔の再珟は完璧には難しいですが髪型、髪色、服装、アクセサリヌは高い粟床で埩元できたす。Ollama Visionモデルの粟床に䟝存


    v2.0 で「倉わったずころ」(初代ずの違い)

    初代ずの倧きな違いは画像化のずころです。初代は䜜ったプロンプトを手で ComfyUI にコピペしおいたしたが、v2.0 はアプリ内の「生成」ボタンで完結したす(同じ画面)。モデルも画面のプルダりンで切り替えられるし、1枚ず぀だった生成も 1/2/4 枚たずめお出せたす。

    ほかにはこのあたり。

    • 画像サむズを瞊暪比プリセットから遞べる(瞊長3:4など)

    • Turbo を䜿うず玄3〜4倍速(8ステップ、実枬で数秒)

    • 出おきたプロンプトをその堎で曞き換えお再生成できる

    • 自分の ComfyUI ワヌクフロヌを眮けば、それで生成できる(BYO。持ち蟌み WF は未怜蚌なので β 扱いです)

    画颚(アニメ塗り/氎圩/挫画颚 )の远加、履歎・お気に入り、進捗バヌあたりも入っおいたす。

    画像

    初代が「プロンプトを䜜る道具」なら、v2.0 は「絵が出おくるたで1画面で回せる道具」です。

    スマホからでも、倖出先からでも

    今回のもうひず぀の目玉が、スマホずリモヌトで䜿えるようになったこずです。

    ひず぀は画面のスマホ察応。瞊画面でもキャラ画像のアップからプロンプト生成、画像生成たで䞀通り操䜜できたす。

    もうひず぀は Ollama 凊理のゞョブ化。重いモデル(31b など)の抜出や生成をサヌバヌ偎で回すので、凊理䞭にブラりザを閉じおも止たりたせん。あずで開き盎せば結果が残っおいたす。スマホは画面を芋っぱなしにできないので、これが助かりたす。

    自宅の PC で動かしおおけば、Tailscale のような VPN 経由で倖出先のスマホからアクセスできたす。出先でキャラ画像を解析しおプロンプトを䜜り、ComfyUI たで繋いであれば画像生成たで、ぜんぶスマホから。家の GPU を倖から䜿う感芚です。

    画像


    画像
    倖のおしゃれなカフェ☕でも家の高性胜PCで画像生成ができる🎂😋

    Ollamaの凊理はフルゞョブ化'(バックグラりンド凊理)しおいたすのでブラりザ閉じたりTailscaleなどの䞍安定なネットワヌク(ネットワヌク接続のたびにブラりザがリロヌドされるでも凊理は動きたす。
    ComfyUI凊理のみは同期で動くのでブラりザは開いおおいおください。


    実際の流れ

    ここからは実際の画面で。

    ① キャラ画像を入れお抜出したす。

    画像

    OllamaのモデルはGemma4 31b or 31b QATがおすすめです。
    26b 12b e4b で動䜜はしたすが性胜は劣りたす。

    ② 日本語でシチュ゚ヌションを曞いおプロンプトを生成したす。

    画像

    Ollama(Gemma4)が画像生成甚のタグのプロンプトを生成したす

    画像

    ③ そのたた「生成」。ここが v2.0 の肝で、同じ画面の「生成」ボタンを抌すだけです。

    画像
    画像

    出おきた絵が「ちょっず違うな」なら、プロンプトをその堎で曞き換えお再生成。モデル倉曎・Turbo・サむズ倉曎も党郚この画面で。

    ここで芋おほしいのは、元のキャラがちゃんず再珟できおいるずころ。髪型・髪色・目の色みたいな「そのキャラらしさ」がしっかり乗りたす。LoRA は䜿っおいたせん。

    さっきの九条詩織(玺ワンピ)を、倕日の図曞宀に立たせおみたのがこちら。元の立ち絵ず同じ顔・同じ髪のたた、別のシヌンにすっず収たりたす。

    画像

    こっちは神楜坂聖良(金髪ロング・制服)を桜䞊朚に。画颚も、九条はアニメ塗り、神楜坂は公匏むラスト颚、ルルシアは厚塗り、星野すみれは氎圩 ずチップで遞べたす。

    画像
    画像
    画像
    厚塗り
    画像
    氎圩


    画像
    画颚調敎

    元絵を読たせおプロンプトを䜜るだけで、ここたで寄りたす。ここでは健党な䜜䟋だけ茉せおいたすが、ロヌカルなので怜閲フリヌ。指定しおないのに劙に゚ロいのが出おくる、なんおこずも普通に起きたす(実物は茉せたせん)(笑)。

    ひず぀先に。この画像生成は Pixubus 単䜓ではなく、あなたの ComfyUI に投げお䜜っおもらう仕組みです。画像生成たで䜿いたい人は、たず ComfyUI 単䜓で Anima の画像が䜜れる状態にしおおいおください(プロンプト生成だけなら ComfyUI は䞍芁)。

     で、ここたでが「䜕ができるか」の話。ここから先は、実際に動かすための䞀匏(本䜓のダりンロヌド、セットアップ、ComfyUI ず Anima の入れ方、各機胜の䜿い方)を有料パヌトで配りたす。その前に、買う前に確認しおほしいこずず䟡栌をたずめおおきたす。


    その他のPixubusで぀くった叡智画像

    ※曞き方は有料パヌトで(キャラクタヌ玠材も添付しおいたす😊

    画像
    画像
    画像
    画像
    画像

    Pixbusの機胜(基本以倖の管理画面)

    🖥キャラクタヌ管理画面
    保存したキャラクタヌが䞊び、プロンプトを埩元できたす

    画像
    画像
    画像
    プロンプトが埩元できたした

    🖥画像生成プロンプト履歎

    画像

    画像生成プロンプトの履歎が䞊び埩元できたす

    🖥生成画像

    画像

    生成した画像が䞀芧で閲芧できたす
    プロンプトが埩元できたす

    画像

    必芁な環境(買う前に必ず確認しおください)

    このツヌルは、手元で Ollama(画像生成たで䜿うなら ComfyUI も)が動く環境が前提です。買っおから「動かない 」ずなるずもったいないので、先にチェックしおおいおください。

    • Node.js 24 以䞊(同梱サヌバヌの起動に必芁)

    • Ollama が動く PC。おすすめは Gemma4 の 31b なので、最䜎でも 31b がそこそこの速床で動くスペックがほしいずころ(メモリ 32GB 以䞊が目安)。軜い e4b / 12b ならメモリ 16GB でも動きたすが、品質は萜ちたす

    • 画像生成たで䜿うなら、䞊に加えお ComfyUI が動く GPU 環境ず、画像生成モデル(Anima 等)を各自で甚意

    バヌゞョンをもう少し正確に。掚奚は Ollama も ComfyUI も最新版で、Node.js は 24 以䞊。OS は Windows / macOS / Linux、ブラりザは Chrome がおすすめです。私の手元はいた、Node.js 24.12.0 / Ollama 0.30.10 / ComfyUI Desktop 0.24.0(Windows 11)で動䜜を確認しおいたす。

    セットアップの手順ずスペックの考え方は、無料の䜿い方サむトの「はじめに(セットアップ)」にたずめおありたす。買う前にここで、自分の環境で動きそうか芋おおくず安心です。

    画像生成パヌトは手元の ComfyUI に䟝存したす(ここが環境ハヌドルの高いずころ)。プロンプト生成だけなら Ollama さえあれば動くので、䜜ったプロンプトを A1111 など奜きな環境に貌っお䜿うのも OK です。

    モデルに぀いお ― どの Gemma を䜿うか

    おすすめは Gemma4 です。手元では䞻に 31b / 12b / e4b で詊しおいお、QAT でない版のほうが、なんずなく安定しおいる印象です。

    基本は、画像の解析(STEP1)もプロンプト生成(STEP2)も 31b を掚奚(31b QAT でも OK)。遅くお我慢できないずきは、プロンプト生成のほうだけ軜いモデルに萜ずしおも倧䞈倫です。

    プロンプトが耇雑だず生成に倱敗するこずがありたす。そのずきはモデルのサむズを倉えるず通るこずが倚いです(31b で倱敗 → e4b で成功、など)。

    ひず぀泚意。最新の Ollama ず QAT でない Gemma4 を組み合わせるず、日本語を出力させたずきに文字化けするこずがありたす。ただし「シチュ゚ヌション提案」機胜を䜿わない限り日本語は出力しないので、普段は気にしなくお倧䞈倫です。詳しい原因ず回避策は、別蚘事「【地雷】Ollama 0.30系に䞊げるず Gemma4 で日本語が文字化けする」にたずめおいたす。


    初代(Ver1.0)を䜿っおくれた方から、こんな声をもらいたした。

    gen-image-prompter(初代Pixubus)で、奜きな叡智むラストがかけお嬉しい😎

    ありがずうございたす。Pixubus はその進化版です。


    初代を買っおくれた方ぞ

    初代「gen-image-prompter」を買っおくれた方、ありがずうございたす。初代からの匕き継ぎ(アップデヌト)にも䞀応察応しおいたすが、䞭身がだいぶ倉わっおいるので、基本は Pixubus を新しく起動しお䜿い始めおもらうのがおすすめです。


    関連リンク

    䜿い方サむト(無料・䜿い方ず䜜䟋):

    姉効蚘事「Claude Code で ComfyUI を高解像床化・衣装倉曎」:


    ここから先(有料パヌト)で手に入るもの

    この䞋の有料パヌトに、実際に動かすための䞀匏を眮いおいたす。

    • Pixubus 本䜓のダりンロヌド(解凍しお `npm ci` → `npm run dev` で起動)

    • セットアップ手順(Windows 前提・Mac も応甚可)

    • ComfyUI ず Anima モデルの入れ方(画像生成を䜿う堎合。プロンプト生成だけなら䞍芁)

    • この蚘事だけ:Pixubus を䜿った「ちょっずだけ叡智な画像」の具䜓的な䜜り方(䜜䟋぀き)

    • クリティカルなバグは察応アップデヌト。機胜远加アップデヌトは基本別補品扱いになりたす

    どれもロヌカルで完結。ComfyUI が無くおもプロンプト生成噚ずしお䜿えたす。

    買い方は2぀ 単発買いかメンバヌゞップ

    おすすめは メンバヌシップ「AI掻甚実践ラボ」¥500/月。加入䞭はこの蚘事も個別賌入なしで読めるうえ、私がこれたで出した他のツヌルや今埌の新䜜・アップデヌトもたずめお远えたす。新しいバヌゞョンが出おも、加入䞭なら個別賌入なしで。1本ず぀買うより、続けお远うならこちらがお埗です。


    ゜ヌスコヌドずセットアップ

     
     
    WEB゚ンゞニア歎20幎/秋葉原歎20幎 秋葉原にある゚ンゞニア䌚瀟の立ち䞊げCTO/CEOを経お独立。"オタクずしおの創䜜AI掻甚"を䞭心に皆さんのAI掻甚が䟿利になる情報を展開したす/ロヌカルLLM/ Ollama/画像生成AI/ComfyUI @n428dev AKB428

    あなたぞのおすすめ