天天看點

最強開源SDXL 1.0釋出!品質拉滿,超簡單prompt一鍵生成

作者:新智元

編輯:拉燕 好困

【新智元導讀】SDXL 1.0重磅釋出!圖檔品質再創新高,prompt還變簡單了。這不沖一波?

就在剛剛,Stability AI正式釋出了下一代文生圖模型——SDXL 1.0。

最強開源SDXL 1.0釋出!品質拉滿,超簡單prompt一鍵生成

要知道,SDXL 0.9也就才釋出一個月拐點彎。

而據官博介紹,這次的1.0版本是StabilityAI的旗艦版生圖模型,也是最棒的開源生圖模型。

最強開源SDXL 1.0釋出!品質拉滿,超簡單prompt一鍵生成

殺手小貓

最強開源SDXL 1.0釋出!品質拉滿,超簡單prompt一鍵生成

幽靈騎士

SDXL 1.0

别的不說,生圖模型最重要的當然就是生圖品質。

從官博中統計的資料可以看出,和其它模型相對比,使用者更青睐1.0版本生成的圖像。

該結果來自StabilityAI在Discord上進行的這幾代Stable Diffusion模型的偏好測試。

最強開源SDXL 1.0釋出!品質拉滿,超簡單prompt一鍵生成

可以看到,上圖中縱軸是偏好比例,橫軸則是各代SDXL或SD模型。一個月前的0.9版本偏好率是24.4%,低于1.0新版26.2%的偏好。

雖然差距沒那麼明顯,但該說不說,新模型就得比老模型強。

StabilityAI表示,SDXL幾乎可以生成任何藝術風格的高品質圖像,是實作一頂一逼真效果的最佳模型。

它可以生成各具特色的圖像,而不需要模型賦予任何特定的感覺,這樣子才能確定風格的絕對自由。

參數方面,SDXL 1.0在色彩的鮮豔度和準确度方面做了很好的調整,對比度、光照和陰影都比SDXL 0.9更好,新版本生成的圖檔全部采用原生的1024x1024分辨率。

此外,SDXL 還能生成圖像模型難以渲染的概念,如手和文字,還有各種物體的空間排列組合。

比如下面這四個圖檔。

最強開源SDXL 1.0釋出!品質拉滿,超簡單prompt一鍵生成

同時,除了圖檔生成品質的上調,prompt的設定也變得更加友善。

現在,1.0版本的SDXL隻需幾個字的prompt就可以生成出複雜、細緻、美觀的圖像。

以往,使用者可能需要在prompt中加入「傑作」這類字眼,才能獲得滿意的高品質圖像,現在不用了。

而且還有個小細節——prompt中細微的差别也能敏銳識别的。

比方說當「The Red Square」大寫的時候,指的是景點「紅場」,小寫的「red square」,指的是紅色的正方形。

現在SDXL都可以一步到位的領會意思了。

最大的開放式圖像模型

從模型的參數規模上看,SDXL 1.0是目前開放式圖像模型中參數數量最多的。

官方表示,這次采用的是全新的架構,基礎模型的參數規模達到35億,同時還有一個66億參數大小的細化模型。

完整模型由一個用于潛在擴散的專家混合管道組成:

第一步,基礎模型先生成(噪聲)潛變量。

第二步,用專門用于最終去噪步驟的細化模型對其進行進一步處理。這裡要注意的是,基礎模型也可以作為獨立子產品使用。

這種兩階段的架構可確定圖像生成的穩健性,而不會影響速度或者使用過多的計算資源。

SDXL 1.0可以在配備 8GB VRAM 的消費級GPU上運作,也可以在就緒的雲上運作。

最強開源SDXL 1.0釋出!品質拉滿,超簡單prompt一鍵生成

有了SDXL 1.0,根據自定義資料對模型進行微調比以往此前的版本都要容易。

自定義LoRA或是檢查點的生成不需要太多的資料處理。Stability AI目前正在利用專門用于SDXL的T2I/ControlNet 來建構下一代的特定任務結構、樣式群組成控制。

官方表示,這些功能目前處于測試預覽階段。

最強開源SDXL 1.0釋出!品質拉滿,超簡單prompt一鍵生成
最強開源SDXL 1.0釋出!品質拉滿,超簡單prompt一鍵生成

其實從6月份開始,Stability AI一直在預覽SDXL 1.0的功能,還釋出過一個僅用于研究的版本,目的就是展示該模型的全新功能。

官方表示,和之前的SDXL模型相比,SDXL 1.0的增強功能包括改進過後的圖像提煉過程,可以生成更鮮豔的色彩、光照和對比度。

SDXL 1.0還引入了微調功能,使使用者能夠輕松建立高度定制的圖像。

最強開源SDXL 1.0釋出!品質拉滿,超簡單prompt一鍵生成

使用方法

而想要使用最新的SDXL 1.0也非常簡單。

1. 在Clipdrop上體驗SDXL 1.0。

最強開源SDXL 1.0釋出!品質拉滿,超簡單prompt一鍵生成

别忘了,下面還有很多風格樣式可選。

最強開源SDXL 1.0釋出!品質拉滿,超簡單prompt一鍵生成

2. 在Stability AI的GitHub頁面擷取SDXL 1.0的權重和相關源代碼。

3. 在Stability AI平台上通過API使用SDXL 1.0。

4. 在AWS Sagemaker和AWS Bedrock上擷取SDXL 1.0。

5. 可以加入Stable Foundation Discord進行SDXL模型的實時測試。

6. DreamStudio也提供SDXL 1.0用于圖像生成。

參考資料:

https://stability.ai/blog/stable-diffusion-sdxl-1-announcement

繼續閱讀