天天看點

阿裡雲視訊雲,用技術普惠打造平民化“虛拟人”

近日,國内首個超寫實數字人 AYAYI 宣布入職阿裡,成為天貓超級品牌日的數字主理人,二者将共同開啟元宇宙的營銷世界。在未來她将與天貓解鎖多個身份,如 NFT 藝術家、數字策展人、潮牌主理人、頂流數字人等等。

阿裡雲視訊雲,用技術普惠打造平民化“虛拟人”
提到虛拟數字人,大家第一時間想到就是 2012 年誕生的洛天依。她的出現補了國内空白的虛拟偶像市場。雖然她最初隻擁有聲音與立繪,但九年來,粉絲們不斷為她寫歌作曲、繪制插畫、制作 MMD,這些同人創作,一點點填充着最初的空白。相比于真人養成偶像,依托于 UGC 内容長大的虛拟偶像,更像是一場純粹的養成式造星。而在 2021 年初以洛天依為代表的、次元特征的虛拟偶像開始在春晚大放光彩,這意味着國家級平台對次元文化的尊重與認可,也是虛拟與現實産生的一次有益互動。
阿裡雲視訊雲,用技術普惠打造平民化“虛拟人”

洛天依亮相春晚節目少兒歌舞《聽我說》

iiMedia Research (艾媒咨詢) 資料顯示,2020 年中國虛拟偶像核心産業規模為 34.6 億元,同比增長 70.3%,預計 2021 年将達到 62.2 億元;另一方面,随着商業價值被不斷發掘,越來越多産業與虛拟偶像聯系在一起,虛拟偶像帶動産業規模 2020 年為 645.6 億元,預計 2021 年為 1074.9 億元。

而在國外的短視訊平台上,虛拟數字人也是大行其道。一位名叫 Lil Miquela 的虛拟偶像,其人設是一個 19 歲混血女孩,有着可愛雀斑,長期定居在洛杉矶,擁有西班牙裔、巴西裔和美國血統的虛拟模特及音樂人。據央視網 2021 年 01 月 30 日的報道,Lil Miquela 在 2019 年的收入折合人民币大約為 7600 萬。

什麼是虛拟數字人?

“虛拟數字人”一詞最早源于 1989 年美國國立醫學圖書館發起的“可視人計劃”(Visible Human Project, YHP)。2001 年, 國内以“中國數字化虛拟人體的科技問題”為主題的香山 科學會議第 174 次學術讨論會提出了“數字化虛拟人體”的概 念。這些“虛拟數字人”主要是指人體結構的可視化,以三維形式顯示人體解剖結構的大小、形狀、位置及器官間的互相空間關系,即利用人體資訊,實作人體解剖結構的數字化。主要應用于醫療領域的人體解剖教學、臨床診療等。

不同于上述醫療領域的數字化人體,目前網絡上圍繞元宇宙所讨論的虛拟數字人(以下簡稱“數字人”)是指具有數字化外形的虛拟人物。與具備實體的機器人不同,虛拟數字人依賴顯示裝置存在。虛拟數字人宜具備以下三方面特征:一是擁有人的外觀,具有特定的相貌、性别和性格等人物特征;二是擁有人的行為,具有用語言、面部表情和肢體動作表達的能力;三 是擁有人的思想,具有識别外界環境、并能與人交流互動的能力。

近年來,得益于深度學習算法的突破,數字人的制作過程變成更加簡單,虛拟數字人開始進入大衆的視野,應用在各行各業,例如已經出現了娛樂型數字人(如虛拟主播、 虛拟偶像)、教育型數字人(如虛拟教師)、助手型數字人 (如虛拟客服、虛拟導遊、智能助手)、影視數字人(如替 身演員或虛拟演員)等。不同外形、不同功能的虛拟數字人賦能影視、傳媒、遊戲、金融、文旅等領域,根據需求為使用者提供定制化服務。

阿裡雲視訊雲,用技術普惠打造平民化“虛拟人”

虛拟數字人産業視圖 資料來源:《2020 年虛拟數字人發展白皮書 》

在實作技術方面,虛拟數字人系統一般情況下由人物形象、語音生成、動畫生成、音視訊 合成顯示、互動等 5 個子產品構成。其中最為基礎的是人物形象技術,根據人物圖形資源的次元,可分為 2D 和 3D 兩大類,從外形上又可分為卡通、拟人、寫實、超寫實等風格。

阿裡雲視訊雲,用技術普惠打造平民化“虛拟人”

資料來源:《2020 年虛拟數字人發展白皮書 》

阿裡雲卡通智繪:打造身邊的虛拟偶像

因為虛拟人的人物形象建構方面具有一定的技術門檻,是以對普通人來說,虛拟人似乎仍停留在偶像階段,隻能“遠觀”。但來自阿裡雲視訊雲的團隊卻通過優化的算法技術,讓普通人也能有機會創造屬于自己的卡通形象,在虛拟世界裡塑造“平民偶像”,在2021年的雲栖大會開發者展區,阿裡雲就展示了最新技術——卡通智繪項目,吸引了近2000名體驗者,成為了大會爆款。這項技術采用了隐變量映射的人臉風格化技術方案,通過機器學習算法可以把拍攝者本來的面目特征和目标訓練風格做深度融合,重建面部的形狀,它既符合使用者臉部特征,又具有卡通的風格化,還可以跟蹤使用者的面部姿态和豐富的表情生成實時動畫。

阿裡雲視訊雲,用技術普惠打造平民化“虛拟人”

而這所有的技術全靠 AI 完成,對使用者而言隻需通過上傳一張自拍照就能自動生成符合使用者人臉特點的虛拟人。

阿裡雲視訊雲,用技術普惠打造平民化“虛拟人”

阿裡雲卡通智繪可以對輸入人像圖檔,發掘其顯著特征(如眼睛大小,鼻型等),自動化生成具有個人特色的虛拟形象(即風格化後的效果)。所謂人臉風格化,就是将真實的人臉頭像轉換為特定的風格頭像,最常見的包括卡通風格、動漫風格、油畫風格,如下圖所示:

阿裡雲視訊雲,用技術普惠打造平民化“虛拟人”

阿裡雲視訊雲卡通智繪效果圖

得益于 AI 技術的高速發展,虛拟人已經不再是觸不可及的事物,在可預見的未來,由卡通智繪建立虛拟人将作為虛拟主播、虛拟老師、虛拟客服、虛拟導遊的數字化身,越來越頻繁的出現在各行各業。

參考資料:中國人工智能産業發展聯盟總體組和中關村數智人工智能産業聯盟數字人工作委員,《2020 年虛拟數字人發展白皮書 》

掃碼入群和作者一起探讨音視訊技術

擷取更多視訊雲行業最新資訊👇

阿裡雲視訊雲,用技術普惠打造平民化“虛拟人”
「視訊雲技術」你最值得關注的音視訊技術公衆号,每周推送來自阿裡雲一線的實踐技術文章,在這裡與音視訊領域一流工程師交流切磋。公衆号背景回複【技術】可加入阿裡雲視訊雲産品技術交流群,和業内大咖一起探讨音視訊技術,擷取更多行業最新資訊。

繼續閱讀