天天看點

Stable Diffusion之ControlNet文圖融合,把牛逼寫在臉上

作者:幽默夢想xWg
Stable Diffusion之ControlNet文圖融合,把牛逼寫在臉上

前言:

最近是不是已經被這種圖檔刷屏了,繼生成二維碼又來迎來了一波新的玩法,将數字和圖像完美的融合,變成一種全新的表現方式。這種創意使字與圖檔融合交織,展現出來的獨特的視覺效果,本次使用的是ControlNet插件中的其中一個title處理器

接下來,讓我們把牛逼寫進圖檔裡,内容很幹,建議收藏起來,文章後邊會附帶上本次使用的所有擴充及插件。

效果展示(沒有高清修複):

Stable Diffusion之ControlNet文圖融合,把牛逼寫在臉上

步數較低,

Stable Diffusion之ControlNet文圖融合,把牛逼寫在臉上
Stable Diffusion之ControlNet文圖融合,把牛逼寫在臉上

調整的控制權重較高,字型展示的越明顯

Stable Diffusion之ControlNet文圖融合,把牛逼寫在臉上

一、準備工作

1、首先準備一張白底黑字或者黑底白字的問題圖檔,最好不要使用特别亂的文字圖檔來使用,否則會導緻融合效果不好,如果你希望你的圖檔背景是深色的,就采用黑底白字。這裡可以使用畫圖軟體或者PS(PhotoShop),也可以使用webUI中的插件,可以把Ps移植到webUI中(photopea),我這裡使用的就是photopea,安裝位址後文中會提供。

建議這裡生成的圖檔是1:1,我這裡用的是尺寸是512*512的畫布尺寸。可以根據習慣生成圖像的大小來處理自己的畫布尺寸,1:1可以做到圖檔的居中。

2、來文生圖位置,設定好我們的起手詞,以及一些習慣生圖的參數,這裡需要注意的是畫面線條越豐富,融合的效果越好

Stable Diffusion之ControlNet文圖融合,把牛逼寫在臉上

3、添加controlNet,這裡選擇子產品tile,預處理器和模型會自動加載出來,這裡大家可以參考我的配置,或者根據自己生成的圖檔風格找到适合自己的圖檔的資料,以下是我生成圖檔的一些參數,控制權重我這裡建議選擇0.65,開始控制步驟選擇0.25,結束控制步驟0.75。開始嘗試。

Stable Diffusion之ControlNet文圖融合,把牛逼寫在臉上

controlNet配置

一切準備好後,開始抽卡。

Stable Diffusion之ControlNet文圖融合,把牛逼寫在臉上

如果大家抽到融合度比較好的卡,建議進行下一步,做圖檔的高清放大處理。把圖檔發送到後期處理。使用R-ESRGAN 4x+對圖檔進行放大。放大倍數設定2倍或者4倍即可。

Stable Diffusion之ControlNet文圖融合,把牛逼寫在臉上

放大後的效果

就這樣一幅嵌入文字的圖像就完成了,是不是很友善。

最後:

如果您喜歡這篇文章,覺得對您有幫助的話,加個關注,感謝您的認可!

文圖融合還有其他類似和二維碼融合一樣的方式也可以制作出同樣的效果,隻是效果不一樣,tile我認為是最為簡單保險的,需要更加精細的調整參數來抽卡。需要說下的是文圖融合的進階版本就是二維碼融合,隻是二維碼圖像比較複雜,需要更加精細的調試。

上文中涉及到的擴充:

photopea (可通過web ui中位址安裝):https://github.com/yankooliveira/sd-webui-photopea-embed.git

tile模型下載下傳:

位址:https://huggingface.co/lllyasviel/ControlNet-v1-1/tree/main 存放目錄為:/Users/****/stable-diffusion-webui/extensions/sd-webui-controlnet/models

Stable Diffusion之ControlNet文圖融合,把牛逼寫在臉上

如果對我的文章内容感興趣,請幫忙關注點贊收藏,感謝!