うちの子LoRA化計画
そこで、「ほたるちゃん顔」再現用のLoRAを作ることでこの手間を削減できないかと今回挑戦してみました。その名も「jujohotaru」、まんまですね。
表題画像・掲載呪文例は「AB4.5-v1.0-fp16」で出したものです。(Cutoffで色分け指定あり)
今まで出してきた絵のうち顔つき・髪型が気に入っているものを60枚ほど選び、顔部分だけ512x512で切り出し(今回は全身画像や正規化画像は含めていません)、Step20・Epoch15で学習させています。
1時間半ほどでできあがったLoRAを適用し、いろいろなデータモデルや服装・シチュエーションで使ってみました。(アップしていませんがR18なものも)
今回上げている11枚はi2iや画像加工を全く行っておらず、すべて出力ファイルそのままです。
かなりの枚数を出して選抜してはいますが、これまで上げてきたほたるちゃんの顔にイメージが近いものが得やすくなったとは思います。
なお、ahogeも含めて学習させたのですが、これは外しておくべきでした。というのも帽子を被せてもアホ毛が飛び出してきてしまうので…付け外しできるようにしたほうがいいですね。
また、AbyssOrangeMix系のモデルはR18重視で調整されているせいもあるのか、笑顔を指定しても眉毛が困り顔風に出てしまうことが多く、普段使っているオリジナルブレンドのマージモデル(今回のLoRA学習元画像に多用)もそのあたりをルーツに含むことから同じ特徴が出てしまっています。今回の表題画像もそうですね。
別のモデルで眉毛を直し、また学習させてバージョンアップを図っていこうと思います。
呪文
呪文を見るにはログイン・会員登録が必須です。
イラストの呪文(プロンプト)
イラストの呪文(ネガティブプロンプト)
- Steps 50
- Scale 7
- Seed 3412317422
- Sampler DPM++ 2M Karras
- Strength
- Noise
- Steps 50
- Scale 7
- Seed 3412317422
- Sampler DPM++ 2M Karras