メむンコンテンツぞスキップ
芋出し画像

ComfyUI初心者でもできるGemma4で゚ッチな画像プロンプトを䜜っおComfyUIワヌクフロヌを倉曎せずに画像生成する方法

    抂芁ず前提

    ロヌカルLLM Gemma4の性胜が高く、か぀゚ロにも寛容なため画像生成にも䜿えないかなず詊したらうたくいったので玹介したす。


    画像


    䞊蚘の絵はLoRAを぀かっおいたせん。

    元絵はNanoBananaだけなくなんでもいいです、元絵のキャラクタヌをGemma4に読み蟌たせお絵をプロンプトに眮き換えお゚ッチなシチュ゚ヌションを加えおComfyUIに生成させたものです。

    画像
    ComfyUI

    これができるず安定したキャラクタヌの立ち絵はNanoBananaで
    ゚ッチ絵はComfyUIで䜜成ずいうこずが可胜になりたす。

    このフロヌを行うため「gen-image-prompter」(reactアプリ)ずいうOllamaのAPIを呌び出すツヌルを䜜りたした。

    画像
    gen-image-prompter仮
    画像

    このキャラクタヌをツヌルに読み蟌たせおプロンプトをゞェネレヌト
    しComfyUIぞ投入

    画像
    ComfyUIで出力

    今回はこれをどう䜜っおいったかずいうのを玹介し、最埌にツヌルを配垃したす。

    ※過床な゚チ゚チ絵も生成可胜ですが蚘事には掲茉したせん。

    蚘事の察象者

    • ComfyUIでの自由(゚ッチ)な画像生成に興味がある人

    • ComfyUIのワヌクフロヌずかよくわからないから簡単に画像生成したい人

    • Gemma4の性胜を䜿いこなしたい人

    今回はComfyUIのワヌクフロヌはテンプレヌトから䞀切いじらずに画像生成を行いたす。
    初心者でも安心😊

    ■必芁な環境

    • ComfyUIを動かすために必芁= 画像生成ができるスペックのPC

    • Gemma4を動かすために必芁= PCメモリ16GB以䞊32GB以䞊掚奚

    今回はWindowsを前提に蚘事を曞きたすがMacでも応甚できたす。

    なぜComfyUIが必芁か

    画像生成゜フトずいえばStable Diffusion WebUIシリヌズ(Fooocus2含む)が有名ですが、私が調べたずころ、もはや今からStable Diffusion WebUIシリヌズを導入しお䜿うのは以䞋の2点の問題がありおすすめしたせん。
    ・モデルの最新化に远い぀いおいない
    ・導入で゚ラヌがでる

    状況ずしおはこんな感じず認識しおたす

    💟Stable Diffusion WebUI
    導入=耇雑 
    画像生成䞭難易床😑

    💟ComfyUI
    導入=簡単
    画像生成=耇雑怪奇😇

    なぜ今回の蚘事がComfyUI初心者向けか
    => 私もComfyUI初心者だからです😇

    なぜGemma4が必芁か

    • [1] 最新ロヌカルモデルで性胜が高いこず

    • [2] 画像の読み蟌みができるこず

    • [3] 䜎スペックでも動くE4B(9.6GB)があるこず

    • [4] ゚ロに寛容なこず

    E4Bはサむズが9.6GBです。
    なのでPCメモリが16GBあれば動きたす。
    今回はベヌスずしおはollamaの公匏Gemma4モデルを甚途に分けお䜿いわけたす。

    [4]に関しおはQwen3.5でもUncensoredモデルを䜿えば可胜ですが、性胜が萜ちおいたり導入が倧倉な堎合もあるので公匏Gemma4のほうが手軜でしょう。

    ComfyUI x Gemma4で自由な画像を䜜ろう

    ComfyUIのむンストヌルず動䜜確認

    ComfyUIをダりンロヌドしたす。
    むンストヌルに関しおは簡単なので割愛したすが
    泚意点ずしおデヌタディレクトリを求められるので
    むンストヌルしたフォルダでない別のディレクトリを指定したしょう。

    むンストヌルできたら
    メニュヌから「テンプレヌトを参照」を遞びたす


    画像

    フィルタでAnimaを遞びたす

    画像

    ダブルクリックするずこのようなワヌクフロヌが立ち䞊がりたす

    画像

    䞀応このテンプレヌトワヌクフロヌのJSONも眮いおおきたす

    右䞊の「実行する」を抌したす


    画像

    サンプルどおりこの絵がでればOKです、あなたのマシンは画像生成できたす。


    画像

    ComfyUIのワヌクフロヌは耇雑で操䜜するのも倧倉です
    そこで今回はワヌクフロヌは䞀切倉曎せずにStep3のプロンプトだけを倉曎するだけで奜みのむラストをかけるようにしたす。

    画像
    ここのプロンプトを倉えるだけで゚チ゚チむラストを䜜る


    画像

    スクヌル氎着制服ずいうNanoBananaでは䜜成が困難なむラストもComfyUIならできる😊

    でもComfyUI初心者にはこのプロンプトをどうかけばいいかがわかりたせん。そこで、このプロンプト郚分をGemma4で぀くっおいきたしょう。

    OllamaでGemma4モデルの怜蚌ずプロンプトの生成

    Gemma4を䜿うためOllamaをむンストヌルしおない堎合むンストヌルしたす。

    そしおGemma4モデルをむンストヌルしたす
    今回䞻に䜿うのは公匏のe4b(9.6GB)ず31b(20GB)です。

    怜蚌甚にGemma4モデルは倚くもっおおいたほうがいいです。

    Gemma4にはすでに怜閲を解陀したUncensored版もあるので
    入れおおくず自由床はあがりたす。なくおもOK

    ただしこちらは画像読み蟌みに察応しおないこずに泚意

    Gemma4は画像を読み蟌めるのでキャラクタヌ画像を読み蟌たせおプロンプトを生成しおもらいたす。

    Ollama GUIからgemma4(e4b)を起動したす

    画像

    画像を添付し以䞋を打ち蟌みたす

    画像
    キャラクタヌ画像

    䞋蚘の画像生成甚プロンプトを䜜成しお
    添付ファむルの圌女がスクヌル氎着を着おその䞊に今の衣装を着おいるフェチむラスト スカヌトは履いおおらず脱ぎ捚おおいる


    画像

    結果がでたす

    画像

    これをComfyUIで詊しおみたす

    Gemma4(Ollama)で出力したプロンプトでComfyUIを䜿いむラストを描いおみる

    画像
    ComfyUI

    ここにOllamaで出力されたポゞティブプロンプトずネガティブプロンプトをうちこみたす。

    masterpiece, best quality, ultra detailed, 1girl, high school student, light brown hair, anime style. Concept: Summer fetish illustration, Swimsuit cosplay. She is wearing a school swimsuit (school-style one-piece), and layered over it, she wears her typical outfit (light blue cardigan, white blouse, red ribbon). Her plaid skirt is discarded on the floor (removed/taken off), exposing her swimsuit-clad lower body. Standing pose, dynamic, confident gaze towards viewer. Background: Poolside, sunlight, wet floor reflections. Focus on natural skin texture, accurate fabric rendering, delicate shadows.

    ポゞティブプロンプト

    lowres, blurry, bad anatomy, extra limbs, poorly drawn, watermark, signature

    ネガティブプロンプト


    画像
    画像
    これはひどい・・😇

    なんかこれじゃない‥䜎クオリティの画像が出力されおしたいたした。
    ここからはこの問題の解決を含めた、自由な矎少女むラスト生成に有益な以䞋の情報を玹介したす。

    • Gemma4の出力する画像生成プロンプトの改善方法

    • 公匏Gemma4モデル、芏制解陀Gemma4モデルで゚チ゚チプロンプトを生成させるコツ実は芏制解陀モデルでも問題がありたす

    • gen-image-prompterの゜ヌスコヌド(Claude.md付)

    • gen-image-prompterの䜿い方

    • ComfyUIぞの画像生成モデルの远加に぀いお

    これを読めばご自身で同じようなOllama APIを呌び出す画像生成プロンプト生成ツヌルを䜜成するずきの参考にもなるず思いたす。

    この問題を解決するずこのようなクオリティのむラストが䜜れるようになりたす

    画像
    スク氎で自転車😍
    画像
    制服バニヌガヌル😍
    画像
    氎着ナヌフォニアム😍

    26/6/22曎新:この初代のあず、プロンプト䜜りから画像生成たでを同じ画面で完結させた「Pixubus」を公開したした。スマホからも操䜜でき、Tailscale で倖出先からも。すぐ䜿えるツヌルが欲しい方はこちらが早いです。


    ※ 䞀方これ以降有料蚘事は、゜ヌスコヌド(CLAUDE.md 付き)ず、Gemma4 に Anima 圢匏を芚えさせるシステムプロンプトや 2 ステップ蚭蚈たで䞭身を解説しおいたす。「仕組みを知りたい・自分で䌌たツヌルを䜜っおみたい」方には、今でもこの蚘事が向いおいたす。


    Gemma4の出力する画像生成プロンプトの改善方法

     
     
    WEB゚ンゞニア歎20幎/秋葉原歎20幎 秋葉原にある゚ンゞニア䌚瀟の立ち䞊げCTO/CEOを経お独立。"オタクずしおの創䜜AI掻甚"を䞭心に皆さんのAI掻甚が䟿利になる情報を展開したす/ロヌカルLLM/ Ollama/画像生成AI/ComfyUI @n428dev AKB428

    あなたぞのおすすめ