![[続]低解像度での絵柄のまま高解像度化（hi-res fix）したい【StableDiffution WebUI研究】](https://chichi-pui.akamaized.net/uploads/post_images/originals/51da1d6d-7090-4d83-b81f-566cf1359ce4/8452df00-aa23-43f6-9deb-c412c89ff881.png)
![[続]低解像度での絵柄のまま高解像度化（hi-res fix）したい【StableDiffution WebUI研究】](https://chichi-pui.akamaized.net/uploads/post_images/originals/51da1d6d-7090-4d83-b81f-566cf1359ce4/4a2759a0-c71e-47f4-947e-d1f955951ef3.png)
![[続]低解像度での絵柄のまま高解像度化（hi-res fix）したい【StableDiffution WebUI研究】](https://chichi-pui.akamaized.net/uploads/post_images/originals/51da1d6d-7090-4d83-b81f-566cf1359ce4/f571f9d5-309b-40a0-8ff3-7b69fbab227e.png)
![[続]低解像度での絵柄のまま高解像度化（hi-res fix）したい【StableDiffution WebUI研究】](https://chichi-pui.akamaized.net/uploads/post_images/originals/51da1d6d-7090-4d83-b81f-566cf1359ce4/9a12a478-b097-4c61-95a1-b438f33e9f97.png)
![[続]低解像度での絵柄のまま高解像度化（hi-res fix）したい【StableDiffution WebUI研究】](https://chichi-pui.akamaized.net/uploads/post_images/originals/51da1d6d-7090-4d83-b81f-566cf1359ce4/b2a9e819-559d-4b2a-a6e0-06fef6c1aa70.png)
![[続]低解像度での絵柄のまま高解像度化（hi-res fix）したい【StableDiffution WebUI研究】](https://chichi-pui.akamaized.net/uploads/post_images/originals/51da1d6d-7090-4d83-b81f-566cf1359ce4/aff54887-966f-4efd-9a22-2e84ed4186e5.png)
![[続]低解像度での絵柄のまま高解像度化（hi-res fix）したい【StableDiffution WebUI研究】](https://chichi-pui.akamaized.net/uploads/post_images/originals/51da1d6d-7090-4d83-b81f-566cf1359ce4/a6a86609-603c-45eb-9078-7939b359e0ec.png)
![[続]低解像度での絵柄のまま高解像度化（hi-res fix）したい【StableDiffution WebUI研究】](https://chichi-pui.akamaized.net/uploads/post_images/originals/51da1d6d-7090-4d83-b81f-566cf1359ce4/e3df4fb6-69af-4af8-88f3-58bac88fc6ff.jpeg)
![[続]低解像度での絵柄のまま高解像度化（hi-res fix）したい【StableDiffution WebUI研究】 1枚目](https://chichi-pui.akamaized.net/uploads/post_images/originals/51da1d6d-7090-4d83-b81f-566cf1359ce4/8452df00-aa23-43f6-9deb-c412c89ff881.png?impolicy=thumbnail&w=120&h=120&x=524&y=0)
![[続]低解像度での絵柄のまま高解像度化（hi-res fix）したい【StableDiffution WebUI研究】 2枚目](https://chichi-pui.akamaized.net/uploads/post_images/originals/51da1d6d-7090-4d83-b81f-566cf1359ce4/4a2759a0-c71e-47f4-947e-d1f955951ef3.png?impolicy=carousel-thumbnail)
![[続]低解像度での絵柄のまま高解像度化（hi-res fix）したい【StableDiffution WebUI研究】 3枚目](https://chichi-pui.akamaized.net/uploads/post_images/originals/51da1d6d-7090-4d83-b81f-566cf1359ce4/f571f9d5-309b-40a0-8ff3-7b69fbab227e.png?impolicy=carousel-thumbnail)
![[続]低解像度での絵柄のまま高解像度化（hi-res fix）したい【StableDiffution WebUI研究】 4枚目](https://chichi-pui.akamaized.net/uploads/post_images/originals/51da1d6d-7090-4d83-b81f-566cf1359ce4/9a12a478-b097-4c61-95a1-b438f33e9f97.png?impolicy=carousel-thumbnail)
![[続]低解像度での絵柄のまま高解像度化（hi-res fix）したい【StableDiffution WebUI研究】 5枚目](https://chichi-pui.akamaized.net/uploads/post_images/originals/51da1d6d-7090-4d83-b81f-566cf1359ce4/b2a9e819-559d-4b2a-a6e0-06fef6c1aa70.png?impolicy=carousel-thumbnail)
![[続]低解像度での絵柄のまま高解像度化（hi-res fix）したい【StableDiffution WebUI研究】 6枚目](https://chichi-pui.akamaized.net/uploads/post_images/originals/51da1d6d-7090-4d83-b81f-566cf1359ce4/aff54887-966f-4efd-9a22-2e84ed4186e5.png?impolicy=carousel-thumbnail)
![[続]低解像度での絵柄のまま高解像度化（hi-res fix）したい【StableDiffution WebUI研究】 7枚目](https://chichi-pui.akamaized.net/uploads/post_images/originals/51da1d6d-7090-4d83-b81f-566cf1359ce4/a6a86609-603c-45eb-9078-7939b359e0ec.png?impolicy=carousel-thumbnail)
![[続]低解像度での絵柄のまま高解像度化（hi-res fix）したい【StableDiffution WebUI研究】 8枚目](https://chichi-pui.akamaized.net/uploads/post_images/originals/51da1d6d-7090-4d83-b81f-566cf1359ce4/e3df4fb6-69af-4af8-88f3-58bac88fc6ff.jpeg?impolicy=carousel-thumbnail)
[続]低解像度での絵柄のまま高解像度化（hi-res fix）したい【StableDiffution WebUI研究】
使用したAI
Stable Diffusion
これは昨日というか本日早朝のエントリからの続きなのでいつもの書き出しは省くよ。
低解像度でhi-res fixなしの絵柄を、hi-res fix後も維持したいという試みだよ。
固定シードで、hi-res fixのDenoise値を0.1刻みで出力したものを比較検討したよ。若干、手描き感のある描線になっているのは、今回の趣旨であるDenoiseのせいではなく、hi-res fixのアップスケーラがLanczosだからなので、そこは気にしないよ。
キモになる目の描写に注目すると、Denoise値が0.3の時に変化が起きはじめていて、0.5の時にはもう明白な違いがあるよ。デフォルトの0.7になると「ああ、いつものだ」というバキバキまつげだよ。
人によってどのポイントが一番好みかは違うだろうけれどもロボ的には0.3から0.4のあたりに着地点を見いだせそうだよ。でも絶対にこれという数値がひとつあるというわけではなく、全体の描写量との兼ね合いなどで、都度調整していくのがベストなのだろうなという気はするよ。
これ以外にも試した画像での検証も含めると、0.1前後だとhi-res後の描写が甘く線に力がなかったりしたので、0.2くらいからのスタートだと思った方がいいかもしれないよ。
そして別の注目として、キャラの周辺を漂うように描かれているごく細かなドット（星、光点）を見てみるよ。値が大きくなるにつれて、やはりドットの総量がぐっと減っているよ。あんまりにも細かな部分なので、Denoise行程によって(noise扱いで)消されてしまったのではないかと思われるよ。
Denoise値が大きいと描写の情報量は減るのだろうなと思っていたけど、この検証でもそれが明らかになったよ。0.7だと、左上の稲穂のようなオブジェクトの「房」がひとまとめな描写になっていたり、右に流れている髪の毛の表現も、まとめられて簡素化されているよ。目の中の色も線も減っているので、これもDenoiseのせいなのだろうと思われるよ。
というところで現状をまとめると、低解像度時の出力と同じ絵柄・描写をhi-res fix後にも得ることは、
「hi-res fixのDenoising Strength値を極端に低く設定する（0.2～0.4くらい）」
ことによっておおむね可能になるよ。画像のカンバスサイズと、描写しているものの面積比で最適な数値は変動すると思うので、その都度良い感じになるよう調節する手間は必要かもしれないよ。これはたとえば、顔アップと半身像では顔そのもののサイズが違うので、設定にも違いが生じるということだよ。
ただし例外条件として、
「hi-res fixのupscalerにLatent系を設定しないこと」
というのがあるようだよ。やってみたら妙にブロックノイズ感のある画像になってしまったので、Latent系のアルゴリズムは低Denoiseとは相性が悪そうだよ。よく使われているというESRGAN 4x 系列なら大丈夫だったよ。
そんなところで今回は以上だよ。StabreDiffutionを使い始めたころに参考にしたブログ記事とかだと、Denoising Strength値はデフォのままでいいとか書いてあったから無思考でそのままにしていたけど、結構重大な影響のあるパラメータだったよ。
低解像度でhi-res fixなしの絵柄を、hi-res fix後も維持したいという試みだよ。
固定シードで、hi-res fixのDenoise値を0.1刻みで出力したものを比較検討したよ。若干、手描き感のある描線になっているのは、今回の趣旨であるDenoiseのせいではなく、hi-res fixのアップスケーラがLanczosだからなので、そこは気にしないよ。
キモになる目の描写に注目すると、Denoise値が0.3の時に変化が起きはじめていて、0.5の時にはもう明白な違いがあるよ。デフォルトの0.7になると「ああ、いつものだ」というバキバキまつげだよ。
人によってどのポイントが一番好みかは違うだろうけれどもロボ的には0.3から0.4のあたりに着地点を見いだせそうだよ。でも絶対にこれという数値がひとつあるというわけではなく、全体の描写量との兼ね合いなどで、都度調整していくのがベストなのだろうなという気はするよ。
これ以外にも試した画像での検証も含めると、0.1前後だとhi-res後の描写が甘く線に力がなかったりしたので、0.2くらいからのスタートだと思った方がいいかもしれないよ。
そして別の注目として、キャラの周辺を漂うように描かれているごく細かなドット（星、光点）を見てみるよ。値が大きくなるにつれて、やはりドットの総量がぐっと減っているよ。あんまりにも細かな部分なので、Denoise行程によって(noise扱いで)消されてしまったのではないかと思われるよ。
Denoise値が大きいと描写の情報量は減るのだろうなと思っていたけど、この検証でもそれが明らかになったよ。0.7だと、左上の稲穂のようなオブジェクトの「房」がひとまとめな描写になっていたり、右に流れている髪の毛の表現も、まとめられて簡素化されているよ。目の中の色も線も減っているので、これもDenoiseのせいなのだろうと思われるよ。
というところで現状をまとめると、低解像度時の出力と同じ絵柄・描写をhi-res fix後にも得ることは、
「hi-res fixのDenoising Strength値を極端に低く設定する（0.2～0.4くらい）」
ことによっておおむね可能になるよ。画像のカンバスサイズと、描写しているものの面積比で最適な数値は変動すると思うので、その都度良い感じになるよう調節する手間は必要かもしれないよ。これはたとえば、顔アップと半身像では顔そのもののサイズが違うので、設定にも違いが生じるということだよ。
ただし例外条件として、
「hi-res fixのupscalerにLatent系を設定しないこと」
というのがあるようだよ。やってみたら妙にブロックノイズ感のある画像になってしまったので、Latent系のアルゴリズムは低Denoiseとは相性が悪そうだよ。よく使われているというESRGAN 4x 系列なら大丈夫だったよ。
そんなところで今回は以上だよ。StabreDiffutionを使い始めたころに参考にしたブログ記事とかだと、Denoising Strength値はデフォのままでいいとか書いてあったから無思考でそのままにしていたけど、結構重大な影響のあるパラメータだったよ。
呪文
- Steps 30
- Scale 8
- Seed 2058264085
- Sampler DPM++ 2M Karras
- Strength
- Noise
- Steps 30
- Scale 8
- Seed 2058264085
- Sampler DPM++ 2M Karras
![旅の街角【1Shot】#19 [Self merged model]](https://chichi-pui.akamaized.net/uploads/post_images/originals/46e9af80-218c-4683-8773-ad8a72fc6474/8637331a-92cf-46c7-850e-2f99e3899f16.png?impolicy=thumbnail&w=400&h=400&x=800&y=0)
![この旅が続くように【1Shot】#18 [Self merged model]](https://chichi-pui.akamaized.net/uploads/post_images/originals/54aa0f79-e766-43d8-bca1-c62ae2d0e8fb/cd7dee95-bf9a-42ac-b0e9-c49359680dec.png?impolicy=thumbnail&w=400&h=400&x=600&y=0)
