ComfyUIでAnime2Realを自動化
使用したAI
Custom Model
祝10万人！ということで、久々に投稿です。
BDさんの "mood board" プロンプトで、アニメ系のモデルでイラストを生成→リアル系モデル＋ControlNet Tile でリアル化 のフローを、ComfyUI で自動化してみました。
普通にやると手間がかかりますが、一度ワークフローを組んでしまえば放置して大量ガチャができます。
BDさんの参考記事: https://note.com/br_d/n/na7816bb5313e
ComfyUI: https://github.com/comfyanonymous/ComfyUI
ComfyUI 解説記事（私とは無関係です）: https://kurokumasoft.com/2023/03/14/stable-diffusion-comfyui/
ComfyUI用のWorkflowファイル（JSON）: https://drive.google.com/file/d/16ZCbgthWTdKnyYIqjn9-Ts2xtAfcQR0D/view?usp=sharing
【私がハマったところメモ】
・モデルのパスは "extra_model_paths.yaml.example" を参考に指定できる
・seedを揃えるには手動入力してincrementする
・tileは "Load ConrtrolNet Model" (diffじゃない方)
・Apply ControlNetの入力imageには前段の出力画像を入れる
・Gitで入れてmain. py から起動する場合は下記を起動オプションに入れる
--use-pytorch-cross-attention
・TIを使うときは "embedding:EasyNegativeV2" みたいに書く
・あとは公式ドキュメントとサンプルを参考にがんばる
https://comfyanonymous.github.io/ComfyUI_examples/
BDさんの "mood board" プロンプトで、アニメ系のモデルでイラストを生成→リアル系モデル＋ControlNet Tile でリアル化 のフローを、ComfyUI で自動化してみました。
普通にやると手間がかかりますが、一度ワークフローを組んでしまえば放置して大量ガチャができます。
BDさんの参考記事: https://note.com/br_d/n/na7816bb5313e
ComfyUI: https://github.com/comfyanonymous/ComfyUI
ComfyUI 解説記事（私とは無関係です）: https://kurokumasoft.com/2023/03/14/stable-diffusion-comfyui/
ComfyUI用のWorkflowファイル（JSON）: https://drive.google.com/file/d/16ZCbgthWTdKnyYIqjn9-Ts2xtAfcQR0D/view?usp=sharing
【私がハマったところメモ】
・モデルのパスは "extra_model_paths.yaml.example" を参考に指定できる
・seedを揃えるには手動入力してincrementする
・tileは "Load ConrtrolNet Model" (diffじゃない方)
・Apply ControlNetの入力imageには前段の出力画像を入れる
・Gitで入れてmain. py から起動する場合は下記を起動オプションに入れる
--use-pytorch-cross-attention
・TIを使うときは "embedding:EasyNegativeV2" みたいに書く
・あとは公式ドキュメントとサンプルを参考にがんばる
https://comfyanonymous.github.io/ComfyUI_examples/
呪文
呪文を見るにはログイン・会員登録が必須です。
イラストの呪文（プロンプト）
jacket partially removed, heart in eye, burnt clothes, holding fishing rod, kanji, doujin cover, pentagram, tape gag, adjusting headwear, red socks, friends, cloud print, coke-bottle glasses, oral invitation, competition school swimsuit, barbell piercing, gradient legwear, prisoner, blood on breasts, wind chime, carrying over shoulder, tape measure, flaming weapon
イラストの呪文（ネガティブプロンプト）
jacket partially removed, heart in eye, burnt clothes, holding fishing rod, kanji, doujin cover, pentagram, tape gag, adjusting headwear, red socks, friends, cloud print, coke-bottle glasses, oral invitation, competition school swimsuit, barbell piercing, gradient legwear, prisoner, blood on breasts, wind chime, carrying over shoulder, tape measure, flaming weapon
- Steps 20
- Scale 8
- Seed
- Sampler DPM++ SDE Karras
- Strength
- Noise
- Steps 20
- Scale 8
- Sampler DPM++ SDE Karras
![キラキラ衣装を着たAI美女 [AI lookbook]](https://m.media-amazon.com/images/I/71bd9uAxH9L._SY466_.jpg)
![[12]C2 Moe33](https://chichi-pui.imgix.net/uploads/post_images/d3b31beb-2b3a-4818-af25-42ded780cc53/3ebb29ec-2e18-436e-8547-4f6f12c7bbee_1200x.jpeg?auto=format&crop=focalpoint&fit=crop&fp-x=0.5&fp-y=0&height=400&lossless=0&width=400)
