前幾天簡單體驗了下 sdxl,只能說效果很驚艷,雖然 sd 的原生模型也就那樣,但是 xl 的思路莫過於給 ai 繪畫打開的新的世代
優化 refine#
sdxl 和其他普通的模型不同,此次的模型發布了兩個版本,一個是 base 模型,也就是出圖常用的模型,但還有一個 refiner 模型,這個模型並不參與出圖,他做的工作是在迭代的最後階段介入對圖片進行優化修復;也就是說 sdxl 實際上是一張圖需要跑兩個模型,base 在完成基礎的出圖後便交給了 refiner 進行優化。這樣做的效果確實相對直接出圖好了不止一點,很多容易畫崩的地方在 sd 得到了解決
事實上配合 lora 和 cn 是基本能做到出一張很好的圖的
缺點#
缺點也很明顯,此次 sdxl 的模型非常之大,兩個模型加起來超過了 14g(或許是因為風格多的問題?)而且此次 sdxl 對於電腦的配置要求再次提升,webui 版需要 8g 顯存才能暢玩,渣機建議選擇 comfyui 進行體驗
出圖方法#
出圖方式,如果你是 1.6.0 之前的可以先用 base 模型出圖後再用圖生圖跑一遍 refiner 模型效果基本也能達到,如果你的 sdwebui 是 1.6.0 之後的,webui 已經自帶了 refiner 插件,只需要選擇好模型調好切換時機即可直接出圖
多風格#
此次 sdxl 模型還有一個特點便是多風格,也就是說啥風格都能畫(畫的一般就是了,真人類表現還行二次元就一般了),建議安裝一個叫sdxl_styles
的插件,這樣能方便進行風格的切換,不然你就背一大堆 tag 了
總結#
sdxl 雖然原生模型依舊不咋地,還是得微調和二次開發的模型,但是這個新的出圖思路無異於給 ai 繪圖革了一次命,期待更多的好圖!
此文由 Mix Space 同步更新至 xLog
原始鏈接為 https://blog.xiaohan-kaka.me/posts/ai/sdxl