天天看點

朱廣權迎手語新搭檔?百度智能雲AI手語主播正式上崗

近日,一則段子手朱廣權與“手語主播”線上pk的視訊火了,剛剛上線播放量就突破百萬。視訊中,朱廣權用超快語速的順口溜挑戰“手語主播”的“手速”,而這位手語主播也憑過硬的專業能力輕松應戰。事實上,這位手語主播不是真人,而是一位虛拟數字人。

朱廣權迎手語新搭檔?百度智能雲AI手語主播正式上崗

這位數字人是由“百度智能雲曦靈”數字人平台打造的首個AI手語主播。她形象親切自然,專業能力出色,在剛剛開啟的冰雪賽事中,百度智能雲AI手語主播已經上線,為聽障使用者提供24小時的手語服務,讓他們也能快捷地擷取賽事資訊。

朱廣權迎手語新搭檔?百度智能雲AI手語主播正式上崗
朱廣權迎手語新搭檔?百度智能雲AI手語主播正式上崗

(AI手語主播)

據統計,全球約有4.3億人患中度及以上聽力障礙,根據全國第二次殘障人士抽樣調查資料,中國有聽障人士2780萬。他們雖然聽不到賽場的聲音,但同樣希望感受賽事的精彩。AI手語數字人無疑成為了他們觀賽的重要橋梁。

百度集團副總裁吳甜表示:“百度已釋出集數字人生産、内容創作、業務配置服務為一體的智能數字人平台——百度智能雲曦靈,百度希望通過領先的全棧AI能力,把虛拟人的生産周期縮短到小時級别,降低生産成本,并且用AI驅動生成内容。”

研發一款AI手語主播有多難?

手語數字人的本質是在解決翻譯問題。

差別于傳統翻譯,手語翻譯的難點在于:手語并非按照語言逐字翻譯,而需要根據語句整體意思進行語言精煉和語序調整,同時還需實時配合表情和唇語,幫助聽障者更好的了解。這就導緻AI手語數字人在資訊凝練度、低延遲時間和精細化三方面面臨極其複雜的技術難題。是以,AI手語主播不僅需要具備高精度的數字人形象,還需要具備能夠語音識别、手語翻譯和手語表達的AI大腦。

朱廣權迎手語新搭檔?百度智能雲AI手語主播正式上崗

(AI手語主播面部細節圖)

從外形看,對比以往AI主播形象,百度智能雲打造的AI手語主播不僅高度還原真人發膚,且在立體感、靈活度、可塑性上都有大幅提升。據悉,百度智能雲建立了規模龐大的手語動作庫,基于《國家通用手語詞典》規範,結合動作捕捉裝置和真實手語老師的雙向調優,精修近1萬個手語動作,保證了手語表達的動作準确性。同時首創4D掃描技術,使得AI手語主播表情自然生動,口型生成準确度高達98.5%。

而她的“AI大腦“則依托于百度智能雲。通過百度自主研發的機器翻譯技術,百度智能雲建構出 套精确的手語翻譯引擎,可懂度達到85%以上,媲美主流的中英、中日等方向的機器翻譯結果,達到業界領先水準,結合百度自研的語音識别技術,可将冰雪賽事的文字及音視訊内容,快速精準的轉化為手語;同時再通過專為手語優化的自然動作引擎,完成AI手語主播的動作驅動,實時演繹為數字人的動作、表情和唇語。這保證了AI手語主播具備高可懂度的手語表達能力和精準連貫的呈現效果。

據了解,如此複雜的數字人研發工作,百度隻用了不到2個月。百度方面表示,虛拟數字人要為人類提供服務、與人自然地交流,需要背後強大的知識體系和對話能力支撐。百度知識圖譜積累的5500億知識,幫助數字人擁有“自己”的經驗和認識去思考。基于百度去年釋出的百億參數對話模型PLATO,虛拟人可以跟使用者進行有料、有趣、有情感的交流。

百度智能雲曦靈數字人平台:半小時生成2D數字人、一兩周制作完成3D數字人

目前,數字人尚未實作規模化産業落地,主要原因在于數字人制作技術門檻高、周期長、成本高。打造一個高精度、高保真的非特異型虛拟人,動辄就需要百萬甚至上千萬的資金投入。

2021年12月,百度釋出了集數字人生産、内容創作、業務配置服務為一體的智能數字人平台——“百度智能雲曦靈”,基于人像驅動、智能對話、語音互動、智能推薦四大技術引擎,實作數字人的“能聽、能說、能了解、可互動”。同時,百度智能雲曦靈提供便捷簡單的操作平台,幫助企業低成本快速定制2D卡通、真人形象及3D卡通、超寫實數字人像,實作對話服務、内容創作全流程業務配置,極大降低數字人開發難度。

不久前,百度集團副總裁吳甜做客央視《對話》節目時提到,“百度希望通過領先的全棧AI能力,把虛拟人的生産周期縮短到小時級别,降低生産成本,并且用AI驅動生成内容。”

朱廣權迎手語新搭檔?百度智能雲AI手語主播正式上崗

(百度智能雲曦靈平台架構圖)

例如,隻要使用者在百度智能雲曦靈平台上傳一張照片,就能快速生成一個可被AI驅動的2D數字人像,原來生産流程需要一個星期做出來的2D數字人,現在可以縮短成半個小時。以前需要兩三個月時間做出來的3D數字人,現在可以壓縮到一兩周,同時數字人個性化功能開發也較之前更加完善,比如通過20句話的輕量化模型訓練,可生成數字人的聲音,即使用者說20句話即可生成屬于自己音色的數字人。

朱廣權迎手語新搭檔?百度智能雲AI手語主播正式上崗

(數字人營運背景圖)

目前,百度智能雲曦靈已為廣電、互娛、金融、政務、營運商、零售等行業提供一站式的虛拟主持人、虛拟員工、虛拟偶像、品牌代言人的建立與營運服務。已落地的案例包括:浦發銀行理财專員數字人“小浦”、中國聯通數字人客服“小U”、百度APP代言人“龔俊數字人”、百度集團數字人“希加加”、火星車數字人“祝融号”等。

百度AI人機互動實驗室負責人李士岩表示:“我們近一兩年的奮鬥目标是通過百度智能雲曦靈平台的開放,讓每個人、每一家企業實作數字人自由。”

朱廣權迎手語新搭檔?百度智能雲AI手語主播正式上崗

(百度智能雲曦靈數字人家族)

雷峰網