天天看點

世界首部AI創作漫畫正式發表:StyleGAN神還原《鐵臂阿童木》畫風,繼承手冢治蟲衣缽

雲栖号資訊:【 點選檢視更多行業資訊

在這裡您可以找到不同行業的第一手的上雲資訊,還在等什麼,快來!

傳奇的作者打造傳世的作品,但作者逝世了,又該怎麼辦?

用AI來“傳宗接代”。

最近,便有團隊利用英偉達的StyleGAN,為已經逝世的傳奇漫畫家——手冢治蟲的作品“續命”。

提到手冢治蟲,你可能會覺得陌生,但提到《鐵臂阿童木》,“大齡”小夥伴們就再熟悉不過了吧?

世界首部AI創作漫畫正式發表:StyleGAN神還原《鐵臂阿童木》畫風,繼承手冢治蟲衣缽

為了延續他的作品,來自記憶體制造商KIOXIA的研究人員和藝術團隊,與日本株式會社聯手,利用深度學習(StyleGAN),創造了世界上第一部由AI生成的漫畫——《PHAEDO》。

為了利于生成漫畫角色,團隊分析了手冢先生數百部漫畫作品,包括《鐵臂阿童木》、《森林大帝》、《怪醫黑傑克》等等。

《PHAEDO》已經在日本《晨間》周刊上發表。

世界首部AI創作漫畫正式發表:StyleGAN神還原《鐵臂阿童木》畫風,繼承手冢治蟲衣缽

這部新漫畫,可以說是很好的傳承了手冢先生的衣缽。

讓漫畫之神的作品“傳宗接代”

《PHAEDO》這部漫畫,其實是Kioxia公司一個叫#FutureMemories 01 “TEZUKA 2020”的項目。

項目負責人東原良平(Ryohei Orihara)介紹說:

它是由AI和人類,根據手冢治蟲的許多記憶創造出一件作品的項目。漫畫這種藝術表現形式,在世界範圍内廣為人知,并且被幾代人所閱讀和喜愛。

世界首部AI創作漫畫正式發表:StyleGAN神還原《鐵臂阿童木》畫風,繼承手冢治蟲衣缽

為了讓AI學習手冢治蟲作品的特點,研究人員将漫畫人物面部的特征轉化為資料,分析在不同場景下劇情發展的情況。

而角色生成階段的核心技術,就是英偉達的StyleGAN。

而為了生成一個與StyleGAN一起使用的訓練資料集,來自公立函館未來大學Mukaiyama教授團隊從手冢先生的作品中收集了超過10000張面部圖像資料集,這些圖像可以用來訓練模型。

Mukaiyama表示:

我們還讓計算機學習手冢作品之外的人臉圖像,包括真人的面部圖像,讓它學習通過左右翻轉人臉,産生增強的資料。

訓練和推理使用多個NVIDIA V100 GPU,以及StyleGAN編寫的cuDNN加速的TensorFlow深度學習架構。

在第一階段,StyleGAN在單一過程中生成了人臉,研究人員說:

我們試圖生成更完整的圖像,其中眼睛、鼻子和嘴巴等細微的細節都是從輪廓等粗糙的描繪中逐漸生成的。

世界首部AI創作漫畫正式發表:StyleGAN神還原《鐵臂阿童木》畫風,繼承手冢治蟲衣缽

接下來,團隊決定隻使用手冢治蟲漫畫中的女性角色。

世界首部AI創作漫畫正式發表:StyleGAN神還原《鐵臂阿童木》畫風,繼承手冢治蟲衣缽

最終,團隊利用遷移學習,将數千個資料點整合在一起,實作了類似手冢作品的風格。

世界首部AI創作漫畫正式發表:StyleGAN神還原《鐵臂阿童木》畫風,繼承手冢治蟲衣缽

通過結合角色的不同個體特征,研究人員發現可以創造出從未出現過的角色。這種機制通過調整結合時的比例,來讓生成的角色産生變化。

Orihara說,他最初并不相信遷移學習可以做到這一點,畢竟模型内部就像“黑箱”一樣,是未知的。

但這就是深度學習非常有趣的原因。

看到角色一個接一個的被創造出來,這個過程是非常有意思的。

作品出來了,發表又遇到了問題。

最開始,《晨間》周刊的主編Miura是拒絕刊登這部漫畫的,他認為項目過程中有太多的人為幹預因素。

但在與團隊多次交涉過後,Miura改變了主意:

我最終意識到,這個項目也可以用來分析人類是如何創作漫畫的,

我想表明,創造一個可以在這些作品中繪制漫畫的AI,本身就是一個人類的創造過程。

關于手冢治蟲

手冢治蟲(1928年11月3日—1989年2月9日),本名手冢治,因喜愛昆蟲而取了“手冢治蟲”的筆名。漫畫家、動畫制作人、醫學博士。

世界首部AI創作漫畫正式發表:StyleGAN神還原《鐵臂阿童木》畫風,繼承手冢治蟲衣缽

1947年以漫畫《新寶島》奠定了日本漫畫的叙述方式,創立了日本漫畫意識形态,極大的擴張了新漫畫的表現力。1952年作品《鐵臂阿童木》轟動日本,1953年的《緞帶騎士》則是公認的世界第一部少女漫畫。漫畫作品《火之鳥》至今被普遍認為日本漫畫界最高傑作。

世界首部AI創作漫畫正式發表:StyleGAN神還原《鐵臂阿童木》畫風,繼承手冢治蟲衣缽

同時,他也是日本第一位導入助手制度與企業化經營的漫畫家。1961年成立“蟲Production動畫部”,翌年以“蟲制作公司”的名義開始活動,日本第一部多集TV動畫《鐵臂阿童木》、第一部彩色多集TV動畫《森林大帝》均誕生于此。1973年蟲制作商事倒閉,欠下三億巨額債務,仍然不停止漫畫創作活動,同年以作品《怪醫黑傑克》俘虜全國讀者,創下多項紀錄。

One More Thing

漫畫之神手冢治蟲教我們用科技來描繪夢想的樂趣。同時,他堅持認為,科學不應該抛棄人性。

于是,KIOXIA在項目的官網上,還提出了這樣的一個問題:

如果手冢治蟲現在還在世,他眼中(漫畫作品)的未來會是什麼樣子呢?

世界首部AI創作漫畫正式發表:StyleGAN神還原《鐵臂阿童木》畫風,繼承手冢治蟲衣缽

除了他本人,應該沒有人能給出精确的答案。

但利用AI,或許能夠為這個問題,提供一個方向。

【雲栖号線上課堂】每天都有産品技術專家分享!

課程位址:

https://yqh.aliyun.com/live

立即加入社群,與專家面對面,及時了解課程最新動态!

【雲栖号線上課堂 社群】

https://c.tb.cn/F3.Z8gvnK

原文釋出時間:2020-04-21

本文作者:十三

本文來自:“量子位公衆号”,了解相關資訊可以關注“公衆号 QbitAI”