天天看點

虛拟人直播火爆背後:動作捕捉技術哪家強?

鞭牛士報道 最近,虛拟主播的熱度持續升溫。

被稱為現象級虛拟人的美妝達人柳夜熙,第一條視訊漲粉上百萬,出道即巅峰;攜“聲優”首發優勢,快速卡位虛拟直播的抖音主播許安一,三周多時間,漲粉近10萬,引發圍觀熱潮。更早一些,洛天依、ayayi、清華學生華智冰……越來越多的虛拟數字人受到追捧,并迅速蹿紅。

研究資料顯示,目前虛拟數字人市場規模已超2000億元,預計2030年達到2700億元,虛拟人賽道有望湧現超過5家以上的獨角獸企業。其中以虛拟主播、明星虛拟分身、品牌代言人等為代表的身份型虛拟人将在未來将占據主導地位,體量達1750億元。

虛拟人,借着元宇宙基礎設施的東風,一下子站到風口浪尖上。特别是在内卷化嚴重的MCN、主播市場中,虛拟人的出現,解決了IP穩定性、不願出鏡、差異化競争等難題,甚至被認為是主播逆襲的工具。提及虛拟人,除了内容端的形象設計模組化、渲染外,決定虛拟人靈活性、穩定性、使用門檻的動作捕捉技術,是兵家必争之地。

雷射+慣性:易搭建、易攜帶,連續直播不“掉線”

4月17日,抖音虛拟主播許安一直播間,人聲鼎沸。“到一萬人就給大家倒立,還能随意跳舞,我還會倒立洗頭呢,絕活可多了”,線上資料很快飙升到1萬人,許安一二話不說,當場就來了個倒立,整個動作行雲流水,絲毫不拖沓。

但恰恰就是這樣一個線下直播的“正常”動作,如果讓虛拟數字人“照辦”,對動作捕捉技術和裝置的要求就相當苛刻了。

虛拟人直播火爆背後:動作捕捉技術哪家強?

有了“雷射定位+慣性”的動捕技術,才讓許安一“有恃無恐”。因為在采用STEPVR的動捕方案前,虛拟主播在視窗前很容易“掉鍊子”,或是突然形象崩塌,或是大幅動作“穿幫”,是以,不得不謹小慎微。有了“雷射+慣性”動捕技術的加持,主播可以在直播間裡肆意表演,跳舞、倒立、翻跟頭等高難度動作,都能流暢完成,還支援多人實時動捕,觀賞性一下子就拉高很多。

相比其他類别動捕技術,“雷射+慣性”還有超強穩定性的優勢,連續直播10小時,不會拉胯,不需要矯正複位等多餘的操作。另外值得一提的是,這一動捕技術成本效益極高,使用門檻極低,對空間要求也很低,主播如果想換個“場子”,拎着箱子出去,在任意小空間都可以靈活搭建,直播起來,幾乎是傻瓜式操作。

慣性:成本低廉,但短闆很明顯,需15分鐘矯正

目前,應用在虛拟直播上的慣性動作捕捉技術占主流。從原理上講,是将慣性傳感器應用到資料采集端,通過慣性原理對資料進行處理,進而完成運動目标的姿态角度測量,可以簡單了解為手機裡那個陀螺儀。

好處是,成本相對低廉,短闆也非常突出,誤差比較大,重複精度比較低。因為動作捕捉資料由推算而來,是以絕對位置的資料精準度非常低。比如現實世界的才藝表演,主播回到原點後,虛拟世界跟随同樣的運動後,慣性式虛拟人極有可能回不到最初的原點,甚至跑到旮旯去了。資料誤差不斷積累的話,就需要每15分鐘,複位矯正一次裝置。

對虛拟主播來說,這就尴尬了,往往難以忍受。

是以,使用了單一慣性動捕技術的虛拟主播,不管是跳舞、運動,上限時間是15分鐘左右,之後主播不得不回到座椅上“休息”一下,實際上是為了複位校正。再者,使用慣性動捕時,如果周邊手機裝置較多的話,電磁信号複雜,很可能導緻虛拟人會突然姿态崩潰、失控。目前,國外代表性的企業有Xsence,國内采用慣性的動捕企業也不少。

光學相機:影視級别效果,搭建複雜,可移動性差

最後一類是光學相機動捕技術,這一流派并不陌生,在《阿凡達》等好萊塢卡通片中,有着廣泛應用。技術原理上是通過多個紅外發射攝像頭,對室内空間進行覆寫,在被追蹤物體上放置反光點,通過捕捉這些反光點反射回來的圖像,确定其在空間中的位置資訊。

優勢是影視級别效果,因為多年技術沉澱,成片視覺效果細膩。當然,這自然是所有虛拟主播所追求的目标,品質體驗上對粉絲更為友好,但可惜的是,價格極高,讓人望而卻步。而且操作起來相當複雜,需要進行長時間教育訓練,無法實作快速搭建,搭建完成後不能輕易“挪動”,可移動性差,需要專業人員定期維護。

但這與虛拟主播的未來發展趨勢有點兒相悖,他們需要更高的自由度。

比如聲優主播許安一借助虛拟人,以黑馬姿态出位;柳夜熙爆火後,馬不停蹄地線上下開展攻勢,接品牌代言;麥當勞推出首位虛拟代言人,超寫實數字人Ayayi也成品牌合作大戶,以及未來虛拟人走向帶貨場景。這意味着虛拟人面向的未來場景更多元,不僅僅存在于直播間,這就要求背後的動捕技術具有靈活、可移動、快速搭建、免維護的特征。顯然,光學相機一派的弊端明顯,有些難以适從。

虛拟人直播火爆背後:動作捕捉技術哪家強?

對比了一番後,動作捕捉技術究竟孰強孰弱?結果可能已經不言而喻:慣性短期内有一定成本優勢,但長期看未來可能是“雷射+慣性”技術的天下。

繼續閱讀