![コンタクトシート-001](https://live.staticflickr.com/65535/53179272197_dd3b7665c5_c.jpg)
先日、Stable Diffusion XL(SDXL)がStable Diffusion web UIで簡単に使えるようになった記事を書きましたが、すでにControlNetもSDXL対応しているし、SDXLベースのモデルも沢山出てきているようなので、簡単に試してみました。
ControlNetのSDXL対応
ControlNetを最新版にUpdateするとSDXL対応になりました。ControlNet用のモデルは下記からダウンロードして、stable-diffusion-webui/extensions/sd-webui-controlnet/modelsフォルダに入れます。
https://huggingface.co/lllyasviel/sd_control_collection/tree/main
![screencapture-127-0-0-1-7860-2023-09-08-23_36_33](https://live.staticflickr.com/65535/53175839897_b14bdd3401_b.jpg)
何かモデルが非常に多くなっていてどれを選べば良いのかよくわかりませんが、試してみたらちゃんと動きました。
SDXLベースのチューニングモデル・マージモデル
SDXLベースのチューニングモデル・マージモデルもすでにたくさん公開されていますね。いくつかダウンロードして簡単に試してみました。
アニメ風画像生成モデル
SDXLベースのモデルは、アニメ画像チューニングされたものでも、単純なプロンプトだとアニメ風でない絵画・実写寄りのものになるみたいですね。各モデルで同じプロンプトを試してみました。refinerも使ったほうが良いのか分からなかったので、なしとありで試してみています。
1枚目:プロンプト:beautiful girl, portrait, best quality, masterpiece
2枚目:同じプロンプトでsd_xl_refiner_1.0.safetensorsをSwitch at 0.8で適用
3枚目:プロンプト:beautiful, 1girl, anime, best quality, masterpiece
4枚目:同じプロンプトでsd_xl_refiner_1.0.safetensorsをSwitch at 0.8で適用
ANIMAGINE XL
animagine-xl.safetensors
![00018-4201413147](https://live.staticflickr.com/65535/53176827180_803a51867d_c.jpg)
![00038-3699062681](https://live.staticflickr.com/65535/53176390261_3a72846aaa_c.jpg)
![00056-4014145701](https://live.staticflickr.com/65535/53176887124_d2355b4807_c.jpg)
![00076-2135244995](https://live.staticflickr.com/65535/53177638284_996a800182_c.jpg)
blue_pencil-XL
bluePencilXL_v010.safetensors
![00016-659660248](https://live.staticflickr.com/65535/53175802642_b5357f846b_c.jpg)
![00039-3691774934](https://live.staticflickr.com/65535/53176827030_d1e2e393c4_c.jpg)
![00058-3900145808](https://live.staticflickr.com/65535/53177177948_661f897bfd_c.jpg)
![00077-3517356846](https://live.staticflickr.com/65535/53176847302_399be797df_c.jpg)
BreakDomainXL
breakdomainxl_v03d.safetensors
![00020-2939994082](https://live.staticflickr.com/65535/53176885598_c4028b6877_c.jpg)
![00041-2410055726](https://live.staticflickr.com/65535/53176827005_4c383f1c9e_c.jpg)
![00066-521083323](https://live.staticflickr.com/65535/53177177838_30b43aa449_c.jpg)
![00078-239626971](https://live.staticflickr.com/65535/53176847242_e6bce4bd9c_c.jpg)
LastpieceCoreXL
lastpiececorexl_s0964.safetensors
![00031-2540208021](https://live.staticflickr.com/65535/53175802512_7e8a01e6bc_c.jpg)
![00046-216993059](https://live.staticflickr.com/65535/53176826970_eb09ea3b4f_c.jpg)
![00064-4195085289](https://live.staticflickr.com/65535/53176887024_72563c15c3_c.jpg)
![00079-362753795](https://live.staticflickr.com/65535/53177933853_de3b8c7c52_c.jpg)
nijianimeSDXL
nijianimesdxl_v10.safetensors
![00026-3027449355](https://live.staticflickr.com/65535/53176885538_2a12fce196_c.jpg)
![00048-499383228](https://live.staticflickr.com/65535/53176885363_350ac0ca65_c.jpg)
![00067-2161757441](https://live.staticflickr.com/65535/53176886999_1c588b6558_c.jpg)
![00081-999598742](https://live.staticflickr.com/65535/53177933848_df26ff3db2_c.jpg)
Tonade, Rabbit, |Joint production|SDXL:1.0
tonadeRabbitJoint_v11.safetensors
![00029-69510165](https://live.staticflickr.com/65535/53176593699_4ebcf9c096_c.jpg)
![00050-53348524](https://live.staticflickr.com/65535/53175802357_a466a4e1d4_c.jpg)
![00068-88771447](https://live.staticflickr.com/65535/53176682106_8b305c3763_c.jpg)
![00000-3292094363](https://live.staticflickr.com/65535/53177874390_7b69157dea_c.jpg)
animeのプロンプト追加だけで劇的に変わるのが驚きです。anime指定しないで生成される画像も良い感じのものもありますね。
refinerを適用すると少しくっきりした感じになる印象ですね。どちらが良いかは好みの問題かも。
実写風画像生成モデル
実写系モデルはまだ少ない感じですね。
1枚目:プロンプト:beautiful girl, portrait, best quality, masterpiece
2枚目:同じプロンプトでsd_xl_refiner_1.0.safetensorsをSwitch at 0.8で適用
3枚目:プロンプト:beautiful girl, photorealistic, potrtrait, best quality, masterpiece
4枚目:同じプロンプトでsd_xl_refiner_1.0.safetensorsをSwitch at 0.8で適用
DreamShaper XL1.0
dreamshaperXL10_alpha2Xl10.safetensors
![00022-357675888](https://live.staticflickr.com/65535/53176593779_4fb2b8cc37_c.jpg)
![00044-1279089620](https://live.staticflickr.com/65535/53175802382_4a55c9e503_c.jpg)
![00063-1266232793](https://live.staticflickr.com/65535/53177122000_69424275de_c.jpg)
![00001-3501982551](https://live.staticflickr.com/65535/53177934438_8f89131a3b_c.jpg)
fuduki_mix
fudukiMix_v10.safetensors
![00033-4050101290](https://live.staticflickr.com/65535/53176885463_58eda2e98f_c.jpg)
![00036-3037876624](https://live.staticflickr.com/65535/53176390256_2a3097d692_c.jpg)
![00060-115401920](https://live.staticflickr.com/65535/53176682196_f4c11bc85a_c.jpg)
![00002-3721935814](https://live.staticflickr.com/65535/53177638819_85a248c94a_c.jpg)
実写系モデルは、photorealisticのプロンプトを入れると少しリアルになる感じがしますが、あまり変わらないかも。refinerを適用すると目とかがくっきりする印象です。
全体的に少ないプロンプトでも良い感じの画像が生成される確率が非常に高いですね。色々遊んでみたいと思います。
ピンバック: Stable Diffusion web UI v1.6.0 で 次世代 #StableDiffusion (#SDXL) が簡単に使えるようになりました | Digital Life Innovator
ピンバック: 2023年の振り返り | Digital Life Innovator