天天看點

Photoshop把AI論文demo打包實作了:照片上色、改年齡、換表情隻需要點點滑鼠

Photoshop把AI論文demo打包實作了:照片上色、改年齡、換表情隻需要點點滑鼠

這兩年,我們從很多論文中看到過一些令人驚豔的 demo,比如老照片自動上色、低畫質圖像秒變高清圖像、普通圖像一鍵變梵高風格等。

但對于不寫代碼、不玩模型的普通人來說,這些 demo 展示的應用還是非常遙遠,或者隻能從某個 APP 中找到其中一種。是以,經常有人會問:「我也想用這個 demo 裡的效果,但不懂代碼,我還有機會嗎?」

先說答案:有。

這個答案來自大名鼎鼎的 Adobe。這家極富創意的公司最近在 Photoshop 22.0 版更新中推出了一個新的工具包——Neural Filters,把自動上色、超分辨率、風格遷移等之前很多論文展示的功能都打包到了一起。

先來看自動上色:

Photoshop把AI論文demo打包實作了:照片上色、改年齡、換表情隻需要點點滑鼠

可以看到,整個過程能夠一鍵完成。當然,如果你對某一處的上色效果不滿意,可以選擇手動調整:

Photoshop把AI論文demo打包實作了:照片上色、改年齡、換表情隻需要點點滑鼠

其實,局部上色效果不佳是目前很多算法存在的共性問題,Photoshop 這種「自動 + 手動」的方法似乎更加靈活。

日常生活中的照片也經常存在分辨率不夠高或被壓成 JPEG 格式後畫質變差的情況,而在 Neural Filters 中,這個問題也通過添加細節被克服了:

Photoshop把AI論文demo打包實作了:照片上色、改年齡、換表情隻需要點點滑鼠
Photoshop把AI論文demo打包實作了:照片上色、改年齡、換表情隻需要點點滑鼠

這波修複操作包括「增強圖像細節」、「消除 JPEG 僞影」和「降噪」。

其他特色功能還包括風格遷移、年齡轉換、角度變換、深度感覺等:

Photoshop把AI論文demo打包實作了:照片上色、改年齡、換表情隻需要點點滑鼠

有了這個濾鏡,人人都是梵高。

Photoshop把AI論文demo打包實作了:照片上色、改年齡、換表情隻需要點點滑鼠
Photoshop把AI論文demo打包實作了:照片上色、改年齡、換表情隻需要點點滑鼠

笑着笑着就老了。

Photoshop把AI論文demo打包實作了:照片上色、改年齡、換表情隻需要點點滑鼠
Photoshop把AI論文demo打包實作了:照片上色、改年齡、換表情隻需要點點滑鼠

拍照愛歪頭的同學有救了。

在表情調整方面,Neural Filters 也做出了改進。與之前 Liquify 使用原像素調整表情不同,Neural Filters 可以生成新的像素,使得調整後的表情更加明顯,可調幅度更大。

Photoshop把AI論文demo打包實作了:照片上色、改年齡、換表情隻需要點點滑鼠

看完這些效果之後,不少網友表示:「心動了」,「買正版有動力了」。

Photoshop把AI論文demo打包實作了:照片上色、改年齡、換表情隻需要點點滑鼠

Adobe 官方頁面介紹稱,Neural Filters 是一款基于 Adobe Sensei 的機器學習工具包,通過生成原始圖像中不存在的上下文像素來調整圖像。

Adobe Sensei 并非一款單獨的軟體産品,而是一個可以應用于 Adobe 旗下各款産品的底層人工智能工具,于 2016 年正式釋出。Sensei 利用了 Adobe 長期積累下來的大量資料和内容,從圖檔到影像,能夠幫助人們解決在媒體素材創意過程中面臨的一系列問題,例如如何在網際網路上的海量圖庫裡找到想要的圖檔,讓軟體明白某張照片、某張照片的一部分、某段視訊以及某段文本描述的真實含義,幫助人們把一些固定、重複性的操作變得自動化和簡單化。

這麼強大的功能是在本地還是雲端實作的呢?Adobe 介紹說,除了 Depth-Aware Haze 之外,Neural Filters 的大部分功能都是在本地運作的。表情、年齡調整等比較複雜的操作有些會在雲端進行。

在使用這些功能時,軟體會優先選擇調用你的 GPU,如果沒有高性能 GPU 就調用 CPU,但高性能的 GPU 不是必需的。

Neural Filters 怎麼用

Neural Filters 的使用非常簡單。首先,你需要從雲端下載下傳 filters 并開始編輯。點選 Filters > Neural Filters,你可以在 Neural Filters 工作區中找到 featured  filters 和 beta filters。

Photoshop把AI論文demo打包實作了:照片上色、改年齡、換表情隻需要點點滑鼠
Photoshop把AI論文demo打包實作了:照片上色、改年齡、換表情隻需要點點滑鼠

具體來說,第一次使用需要完成以下三個步驟:

1. 選擇 Filter > Neural Filters

Photoshop把AI論文demo打包實作了:照片上色、改年齡、換表情隻需要點點滑鼠

2. 從雲端下載下傳所需的 filters

任何在其旁邊顯示有雲圖示的 filters 在第一次使用前都需要從雲端下載下傳。點選雲圖示下載下傳 filter。

Photoshop把AI論文demo打包實作了:照片上色、改年齡、換表情隻需要點點滑鼠

3. 啟動和調整 filter

啟用 filter,用右側面闆中的選項來建立所需的效果。

Photoshop把AI論文demo打包實作了:照片上色、改年齡、換表情隻需要點點滑鼠

Filter 類型

Photoshop把AI論文demo打包實作了:照片上色、改年齡、換表情隻需要點點滑鼠

Neural Filters 有 3 種類型的應用:

  • 功能齊全的應用:這些是已釋出的 filters,符合嚴格标準。
  • Beta:這類 filters 僅限于測試,其背後的機器學習模型或工作流程還在改進中。你可以試用這些功能,但輸出效果可能不理想。
  • 即将到來的 Filters:這類 filters 還沒開發出來,但将來或許能實作。

注意:如果在圖像中沒有檢測到人臉,肖像相關 filters 将會變灰。

輸出選項

Photoshop把AI論文demo打包實作了:照片上色、改年齡、換表情隻需要點點滑鼠

你可以通過以下其中一種方式将生成的編輯内容另存為輸出:

  • Current Layer:生成像素來修補目前層的破壞性操作。
  • Duplicate Layer:複制目前層,并将新的 filters 應用到新層。
  • Duplicate Layer masked:建立一個新層,并将 filters 用作新層的一個 mask。
  • New Layer:僅用新生成的像素生成一個新層。
  • Smart Filter:生成新的像素并将其作為一個智能 filter 應用。

有了 Neural Filters,PS 一張圖再也不需要太多專業知識了,Neural Filters 會改變世界嗎?

「有了神經網絡濾鏡,我們終于可以說 Photoshop 是全球最先進的 AI 應用了,」Adobe 數字成像副總裁 Maria Yap 說道。「現在,我們正在創造的圖像是前所未有的。」

參考連結:

https://helpx.adobe.com/photoshop/using/neural-filters-list-and-faq.html

繼續閱讀