天天看點

「化腐朽為神奇」:Stability AI又出新工具,草圖瞬間精緻

作者:機器之心Pro

機器之心報道

編輯:梓文

草圖變精品,不是說說而已。

繪畫小白們,還在為自己的「手殘」而苦惱嗎?是否常常在想,何時才能把那粗糙線條變得靈動逼真?

除了日複一日的練習,或許你還可以借助下面這款工具:

「化腐朽為神奇」:Stability AI又出新工具,草圖瞬間精緻

如你所見,它能夠化腐朽為神奇,化潦草線稿為精品。

這就是今天要為大家介紹的 Stable Doodle。

這名字,這熟悉的感覺,别懷疑,這款工具就是 Stability AI 即将推出的将草圖轉化為圖像的新服務。

先來看看,這個工具要怎麼使用吧。

Stable Doodle 使用流程

首先,你需要利用滑鼠,在空白畫布上畫出你想要圖像的大緻線條。畫不好?不用擔心。

機器之心謹代表「手殘」中的「戰鬥機」幫大家試試水。經過用時 3 秒、緊張刺激的簡筆畫學習後,機器之心在畫布上畫下一顆心髒和一個齒輪。

「化腐朽為神奇」:Stability AI又出新工具,草圖瞬間精緻

然後,在文字框中輸入相關内容。機器之心輸入了「 machine heart」。

「化腐朽為神奇」:Stability AI又出新工具,草圖瞬間精緻

接下來,點選生成就将見證奇迹時刻了。

「化腐朽為神奇」:Stability AI又出新工具,草圖瞬間精緻

最後,你還能選擇生成圖像的風格。

「化腐朽為神奇」:Stability AI又出新工具,草圖瞬間精緻

圖像風格從左到右分别為 Neon Punk、3D Model、Line Art。

當然,需要注意的是,Stable Doodle 現在隻提供了 14 種風格供選擇,至于未來是否會增加更多選擇就不得而知了。

除了對繪圖小白友好之外,該工具還能讓設計、插畫等領域的工作更便捷、高效。

「化腐朽為神奇」:Stability AI又出新工具,草圖瞬間精緻

Stable Doodle 官方示例

「化腐朽為神奇」:Stability AI又出新工具,草圖瞬間精緻

Stable Doodle 官方示例

「化腐朽為神奇」:Stability AI又出新工具,草圖瞬間精緻

Stable Doodle 官方示例

試玩位址為 https://clipdrop.co/stable-doodle,你也快試試吧。

Stable Doodle 遠不止這麼簡單

衆所周知,Stability AI 是圖像生成模型 Stable Diffusion 背後的初創公司。Stable Doodle 就應用了最新的 Stable Diffusion 技術來識别草圖的輪廓,并再次生成富有藝術感的圖像。

其實市面上已經有不少草圖到圖像的 AI 工具了,但 Stability AI 表示,他們的工具最大優勢為它允許對圖像生成進行更「精确」的控制。

這是因為為 Stable Doodle 提供動力的是 Stable Diffusion XL。它與騰訊研發部門應用研究中心(ARC)開發的「條件控制解決方案」相配對。該控制解決方案稱為 T2I-Adapter,既允許 Stable Diffusion XL 接受草圖作為輸入,又指導模型更好地微調輸出圖稿。

「化腐朽為神奇」:Stability AI又出新工具,草圖瞬間精緻

Stability AI 在推特中表示,T2I-Adapter 與 controlnet 相似,但是效果會更好。通過将可訓練的參數添加到現有的大型擴散模型中,T2I-Adapter 可以包含額外的輸入條件,如草圖、分割圖或關鍵姿勢。該架構同時支援多個輸入引導模型,增強了對生成過程的控制。對于 Stable Doodle 用例,T2I-Adapter 為預先訓練的文本到圖像模型 (SDXL) 提供補充指導,使其能夠了解草圖的輪廓,并根據提示與模型定義的輪廓相結合生成圖像。

「化腐朽為神奇」:Stability AI又出新工具,草圖瞬間精緻

項目位址:https://github.com/TencentARC/T2I-Adapter

參考連結:

https://stability.ai/blog/clipdrop-launches-stable-doodle?continueFlag=6b17b7a626134700c01cc2e1afe3158a

https://techcrunch.com/2023/07/13/stability-ai-releases-stable-doodle-a-sketch-to-image-

https://twitter.com/StabilityAI/status/1679510473073479682

繼續閱讀