前几天简单体验了下 sdxl,只能说效果很惊艳,虽然 sd 的原生模型也就那样,但是 xl 的思路莫过于给 ai 绘画打开的新的世代
优化 refine#
sdxl 和其他普通的模型不同,此次的模型发布了两个版本,一个是 base 模型,也就是出图常用的模型,但还有一个 refiner 模型,这个模型并不参与出图,他做的工作是在迭代的最后阶段介入对图片进行优化修复;也就是说 sdxl 实际上是一张图需要跑两个模型,base 在完成基础的出图后便交给了 refiner 进行优化。这样做的效果确实相对直接出图好了不止一点,很多容易画崩的地方在 sd 得到了解决
事实上配合 lora 和 cn 是基本能做到出一张很好的图的
缺点#
缺点也很明显,此次 sdxl 的模型非常之大,两个模型加起来超过了 14g(或许是因为风格多的问题?)而且此次 sdxl 对于电脑的配置要求再次提升,webui 版需要 8g 显存才能畅玩,渣机建议选择 comfyui 进行体验
出图方法#
出图方式,如果你是 1.6.0 之前的可以先用 base 模型出图后再用图生图跑一遍 refiner 模型效果基本也能达到,如果你的 sdwebui 是 1.6.0 之后的,webui 已经自带了 refiner 插件,只需要选择好模型调好切换时机即可直接出图
多风格#
此次 sdxl 模型还有一个特点便是多风格,也就是说啥风格都能画(画的一般就是了,真人类表现还行二次元就一般了),建议安装一个叫sdxl_styles
的插件,这样能方便进行风格的切换,不然你就背一大堆 tag 了
总结#
sdxl 虽然原生模型依旧不咋地,还是得微调和二次开发的模型,但是这个新的出图思路无异于给 ai 绘图革了一次命,期待更多的好图!
此文由 Mix Space 同步更新至 xLog
原始链接为 https://blog.xiaohan-kaka.me/posts/ai/sdxl