天天看點

簡單、快捷、低成本的超寫實虛拟人平台來了……

本篇文章探讨數字虛拟人大爆發前的必要條件。

雖然數字虛拟人越來越受關注,如果要迎來大爆發,虛拟偶像甚至能部分替代頻頻爆雷的真人偶像地位,但是還需要新平台的出現。

因為,數字虛拟人從表面上看是一種娛樂,但本質上,數字虛拟人是新的網絡應用服務,像社交、電商、外賣一樣,需要強大專門的、專為虛拟人/虛拟偶像服務的平台。

新平台首先要做到:将打造超寫實數字虛拟人的高門檻、高投入真正降下來,變成普及化服務。解決現在如果想開發超寫實虛拟人,花費很貴、難以實時直播、也無法快速批量生産内容等諸多問題。

比如一些超寫實的數字虛拟人,目前也隻是能做到發幾張圖檔的程度,做到視訊的很少,既少也不足。 某高知名度的新消費品牌,推出了廣受好評的品牌虛拟人形象,但公布的也隻是一張圖檔,據了解還在非常初期的階段,并沒有真正進入到動态内容開發。 目前市場上的虛拟偶像天團,隻是幾家娛樂大公司的燒錢遊戲,一個4人虛拟偶像天團,可以在短短幾年内燒掉近億元的資金,而且還遠沒有達到高仿真的程度。 這些都亟待新平台的出現來解決,而衆多巨頭都在進行布局。

我最近發現,新釋出的百度智能雲“數字明星營運平台與燦星計劃”,有可能就是這樣的平台,它正是朝着讓超寫實虛拟人開發,變得更簡單快捷、更低成本、更易營運這一方向去的。

03:0

簡而言之,百度“數字明星營運平台”能做到:

 用 AI 智能的方式 

快速打造數字虛拟偶像 

打造的虛拟偶像既有 3D 超寫實的、直接在真人基礎上生成的,也有半寫實或二維的、寵物化的,都能做到高效、快速生成。而且是一體化智能平台,既能打造 IP 也能營運 IP,和我期望的新平台非常接近。

就在8月18号,和央視新聞聯合舉辦的“百度世界2021”上,已經展示了幾個典範案例,包括将央視著名主持人、真人明星龔俊都變成了數字虛拟人,以及 Q 版的火星車數字人等,展現了各種可能和場景。

簡單、快捷、低成本的超寫實虛拟人平台來了……
簡單、快捷、低成本的超寫實虛拟人平台來了……
簡單、快捷、低成本的超寫實虛拟人平台來了……
簡單、快捷、低成本的超寫實虛拟人平台來了……

“數字明星營運平台”的黑科技非常多、待我一一道來。

 用簡單快捷的 4D 掃描+人工智能 

 直接打造超寫實虛拟人 

目前的超寫實虛拟人開發實在是太麻煩了:

高精度原畫設計;

高寫實 3D 模組化;

導入高水準的虛拟人引擎;

高精度動捕;

高精緻的修幀渲染;

這個流程還沒包括人工智能,隻做出形象和動作而已。這必然導緻成本高昂、流程複雜,不懂行的人根本做不好。

而在“數字明星營運平台”上,情況會有重大改變:你可以不用去找 CG 公司做 3D 模組化,也能打造出足夠漂亮、足夠高仿真的 AI 智能虛拟人。因為平台會通過 4D 掃描技術+人工智能,把你找到的真人變成有智慧的超寫實虛拟人。

簡單、快捷、低成本的超寫實虛拟人平台來了……

你隻需找到符合自己要求的真人美女帥哥,當然孩子和老人也行,剩下的事情,就是由平台來幫你轉化為超寫實虛拟人,節省大量精力時間,也肯定比開發 3D 高仿真模型要省錢。

千萬不要小看這件事,這意味着,哪怕你不是做動畫的、不是做 3D 的、甚至不是做 IP 的,也可以開發出足夠好的超寫實虛拟人。這也意味着,任何網紅也能直接把自己變成數字虛拟人了,而無需繁瑣的模組化工作,具有極為廣闊的應用領域。

根據我拿到的第一手資料,描述一下這個開發過程:

第一步,用高精度 4D 掃描技術,對人體進行全方位掃描,捕捉真人的細膩表現。

第二步,用人工智能機器深度學習掃描資料,并用人工智能算法組合驅動豐富真實的實時面部表現,進而超高精度還原真人模特。

00

其實我以前見過用掃描生成的 3D 人,但由于沒有結合人工智能,表情很不自然,尤其是口型失真,做出來的隻是泥塑木雕的 3D 更新版而已。

是以結合人工智能進行深度學習和算法非常重要,隻有結合了 AI,3D 人才可能顯得有“真情實感”,才有資格稱為“虛拟人”。

簡單、快捷、低成本的超寫實虛拟人平台來了……

這是百度用 4D 掃描+人工智能所做的龔俊數字人,盡可能還原真人偶像的氣質和魅力。

簡單、快捷、低成本的超寫實虛拟人平台來了……

這是百度為央視網開發的全新更新版數字人小 C,也作為奧運資訊搜羅官,出現在剛剛結束的奧運會上。 

第三步,設定五個關鍵次元,即表情、口型、毛發、布料、身型,來打造超寫實虛拟明星,尤其是加入了表情可變的口型合成算法,讓使用者觀感更親切自然,徹底解決口型和表情失真的問題。

簡單、快捷、低成本的超寫實虛拟人平台來了……

毛發、布料與身形

盡可能細膩、自然和豐富

總之,隻要有真人模特,平台就能幫你做出盡可能真實、自然、精細,以及實時驅動的虛拟偶像。

 隻需高精度照片或攝像頭 

 就能生成超寫實虛拟人 

上一種方法還需要真人模特,和專門的高精度掃描。

平台還有更極緻的簡單快捷辦法:用标準人像照片或攝像頭來生成。這種方法隻需要高精度照片或視訊。

簡單、快捷、低成本的超寫實虛拟人平台來了……

方法1:你提供從單張或多張高精度照片,上傳到平台,由平台生成超寫實虛拟人的模型。

方法2:你也可以通過高精度攝像頭進行面部捕捉和動作捕捉,上傳到平台,同樣也能生成超寫實虛拟人的模型。

方法3:直接提供高精度視訊也可以。

當然,要做出超寫實虛拟人不隻這麼簡單,平台還需要從妝容、發型、服裝、音色等各個方面進行再調節,通過5個次元、15項參數,不斷裝扮出新鮮感。

簡單、快捷、低成本的超寫實虛拟人平台來了……

在這背後,平台需要建立豐富的妝容庫、發型庫和衣櫃,以及各種音色庫供選擇。

還有一個趣點:為了保證虛拟人不會做出不雅觀的表現,平台專門設計了基于 AI 技術的數字人表情管理引擎,確定各種虛拟人的驅動表現儀态大方。

總之,一張照片就有可能生成一個虛拟人 IP,然後發展為一個百變的虛拟明星。

我發現這樣做,不僅是在造星,還意味着所有經典的、甚至是去世的真人明星、偶像,隻要獲得家屬的授權許可,也能直接轉化為數字虛拟明星,繼續唱歌、跳舞和演出……

這有點永生的感覺,在元宇宙的虛拟世界裡,生者與逝者,永遠繼續生活在一起……

 一句話生成形象 IP 

 說出來等于做出來 

這是比前兩種方式更極緻簡單的方式:讓普通人可以用一句話的簡單描述,即可自動生成個性化 3D 虛拟數字形象。

你隻需說出你想要的形象,說等于做,說出來就是做起來。比如——

1.  你用語言描述形象的五官特征或者服飾,例如:幫我生成一個大眼睛的穿着裙子的女生。 2.  你也可以用形容詞描述形象,例如:幫我生成一個英俊、幽默的虛拟形象。 3.  你還可以指定明星或職業等形象,例如:幫我生成一個長得像 xx 明星的虛拟形象等。

然後,平台系統就幫你生成、實作出來,然後不斷調整、優化。

“一句話生成”的設想,準備在百度 Apollo 智能車聯的新一代車載虛拟智能助手中落地。

設想一下,你作為老司機,你隻需動動嘴,描述出來,就可以輕松擁有一個專屬的虛拟形象助手,非常有趣、非常高效,而且生成的汽車虛拟助手也很多樣化和個性化。

這背後的黑科技,是百度增強現實技術部正在研發的 3D 虛拟形象智能化生成方案,通過在語音識别、自然語言處理、知識圖譜和增強現實等技術方面的深厚積累和跨模态多技術融合,加上海量的人物知識資料,才有可能實作。

現在正在建立的是——

專屬虛拟形象知識庫,實作對虛拟形象全次元的特征描述;

基于人臉圖檔的形象重建、特征提取,實作使用者專屬個性特征的實時複刻;

基于語音/自然語言處理實作多輪對話式自然互動,使得使用者互動更加友好高效。

我認為“一句話生成形象”的應用場景遠遠不隻是車載助手——

比如購物者可以一句話生成自己希望的虛拟導購員;學生可以一句話生成自己希望的虛拟教師;遊客可以一句話生成自己希望的虛拟導遊;甚至宅男宅女可以一句話生成自己的夢中情人……

這些都是在科幻電影電視劇中出現的設想,很快就會來臨。活在當下,就是活在未來……

 用 AI 增強 

 IP 角色的表達力 

前面介紹的都是如何生成 IP 形象,下面的則是如何增加 IP 角色的表現魅力來快速打造内容。

這對短視訊制作尤其有用。比如 AI 演同款,就是用 AI 技術自動學習熱⻔短視訊,結合自己的 IP 角色,就能一鍵生成表演同款視訊了。

簡單、快捷、低成本的超寫實虛拟人平台來了……

又比如 TTS 視訊,TTS 指的是文字演繹,你隻要輸入一段動作描述文字,就能自動生成一條相應動作的短視訊。

簡單、快捷、低成本的超寫實虛拟人平台來了……
簡單、快捷、低成本的超寫實虛拟人平台來了……

又比如 AI 唱歌,通過 TTS 轉化唱歌,虛拟人的口型、表情、動作都自動與歌曲合拍。又比如 AI 跳舞,可以通過對 2D 動畫的舞蹈進行動作識别,再讓 3D 人物學會跳舞。

簡單、快捷、低成本的超寫實虛拟人平台來了……

還有 AI 動效,通過圖像識别技術,比對 UI 動效,增加角色的趣味性。以及 AI 換臉,如果品牌更換代言人,可以直接在原有内容上,更換品牌代言人的臉,快速生成營運内容。

以上這些,顯然都能極大簡化虛拟人短視訊生産的複雜度,甚至做到一鍵生成,這樣一來,虛拟人短視訊就能具備和真人視訊比産量、比速度的能力。

傳統動畫視訊的生産制作都是相當緩慢的,即使想做快也快不到哪裡去,往往還過于簡陋。

而結合 AI 增強的虛拟人視訊演繹,将有機會開啟一個超級生産的時代。這對現在的短視訊制作生态有相當大的颠覆作用,也對未來産生不可估量的影響。

 充分相容導入已有 3D/2D 模型 

這意味着——現在已有的衆多 3D、2D 動漫角色,可以直接在平台上轉化為自己專屬的數字虛拟人,省去了 IP 創作方的再開發時間。

也就意味着,現有衆多高創作力、低技術能力的 IP 開發方,直接具備轉化自己的 IP 為虛拟人的能力,可以無需模組化、快速做出自己的數字虛拟人,甚至是虛拟偶像。

設想一下到未來,從喜羊羊灰太狼到熊出沒光頭強,從哪吒到姜子牙,從許仙到白蛇青蛇,從刺客伍六七到非人哉、全職高手,都能彼此互動的場景吧。這将開啟全 IP 的虛拟世界……

“數字明星營運平台”上的其他功能,還包括20位現成虛拟偶像,讓你可以先不急着打造新的 IP,直接在平台上選擇,快速一分鐘上崗。

簡單、快捷、低成本的超寫實虛拟人平台來了……

以及三種驅動模式:AI 驅動、拟合驅動和真人驅動,讓你既可以不需要真人直接用 AI 智能驅動,也可以用真人在背後進行“中之人”演繹。

簡單、快捷、低成本的超寫實虛拟人平台來了……

還有豐富的數字資産庫,包括多種風格類型的場景庫、讓鏡頭表達更自由的機位鏡頭庫、道具庫(包括動态道具)、貼紙庫、音效庫、服裝庫、發型庫、表情庫、動作庫等等。

這些都很直覺易懂,不必做詳細介紹。

 IP 營運平台與燦星計劃 

“數字明星營運平台”不隻能開發 IP,還能營運 IP,是一體化智能的閉環體系。而“燦星計劃”是可以和所有現有 IP 營運者進行合作的計劃。

簡單來說,就是通過平台的支援,讓不具備制作和營運數字虛拟人的 IP 開發者、衆多品牌,直接具備開發和營運能力,進而增加 IP 所有者的各種收入。

簡單、快捷、低成本的超寫實虛拟人平台來了……
簡單、快捷、低成本的超寫實虛拟人平台來了……

比如,可以通過平台進行 IP 直播帶貨、IP 直播社交、還可以進行 IP 商業演出、進行 IP 廣告代言、IP 聯名,甚至可以讓 IP 參演各種影視。

既可以合入百度現有的商業生态裡,進行比如開屏廣告、資訊流廣告、直播賣貨和聯名營銷等,也可以在百度之外的平台上進行。

平台還建立了三維虛拟演播室系統,可以直接将虛拟人 IP 内容,推流到各大平台,而且不限于在百度,當然,在百度生态内還會有流量扶持計劃。

所有這些,都是通過“數字明星平台”,用最簡單、快捷的方式實作。

從現在到未來,數字虛拟人有兩種最重要的表達:

一個是“代表我”:在社交娛樂等領域,虛拟形象成為人們創造個性化分身的基礎設施,在不同場合下,讓人們充分表達自我,釋放個性。

另一個是“服務我”:各種服務趨向個性化、定制化,虛拟形象作為服務的實體化表現,有機會成為人們的私人助理、朋友甚至伴侶,為使用者提供情緒價值和實用價值,參與使用者的生活。

前者是使用者個人的虛拟人化,後者是品牌、商業服務的虛拟人化,共同構成了未來的元宇宙。

一個能簡化數字虛拟人創意生産制作的新平台,能充分幫助實作這一切,産生無限的可能。

當平台讓數字虛拟人的開發和營運,變得簡單、快捷、高效和低價時,就有可能實作——衆多品牌+衆多創意小團隊+個人創造者的共赢生态平台。

數字虛拟人才能夠成為網際網路的基礎服務,實作從購物到娛樂、從教育到新聞、從内容到社交的大爆發,一直到元宇宙……虛拟人是元宇宙的奠基石。​

繼續閱讀