天天看點

我在VR裡看冬奧:運動員在我頭頂飛

智東西(公衆号:zhidxcom)

作者 | 徐珊

編輯 | 雲鵬

“這簡直太好玩了,我還沒有玩夠!”運動員在冬奧會場館内沉迷玩VR遊戲的視訊近日在多個社交媒體上廣泛傳播。

我在VR裡看冬奧:運動員在我頭頂飛

▲冬奧場館内的VR遊戲實況

随着全民對冬奧賽事的關注度提高,越來越多的人感受到冰雪運動的魅力。一些精彩瞬間的背後,VR直播、360度自由觀賽、虛拟數字人……不少“元宇宙”要素活躍在北京冬奧會的各個角落。

自從2016年裡約奧運會首次使用VR技術以後,奧運會不但記錄着運動員的成長,也見證着VR技術發展。比如說,2018年南韓平昌奧運會期間,英特爾通過True VR技術對部分賽事拍攝,提供360度全景視訊觀看,同時還提供VR直播和VR點播兩種類型的賽事觀看服務。今年北京冬奧會,VR技術的應用更是在娛樂、訓練、觀賽等多個領域都給人們帶來了更多的驚喜。

我在VR裡看冬奧:運動員在我頭頂飛

▲通過360度全景視訊觀看比賽

冬奧會賽事程序已接近尾聲,VR技術究竟用在了哪些地方?國内VR廠商們又是如何在冬奧會中赢得世界關注?經過一番調查并親自VR觀賽後,我們發現這次冬奧會,VR廠商們都在集體“秀大招”。

一、親測3種VR看冬奧,大屏觀賽如臨現場

“VR直播年年有,但是每次直播效果都不好。”過去的VR直播受限于場地、裝置等原因,轉播的畫面總會出現模糊不清、觀看角度不好和時效性差等問題,是以,部分觀衆一直不看好大型賽事的VR直播,對于臨場感和沉浸感更是不奢求。

為了解決這些難題,國内早在2019年就專門組建了“冰雪項目互動式多元度觀賽體驗技術與系統”項目團隊,由北京大學牽頭,國家實驗室、企業和其他高校參與合作研發,北京大學教授陳寶權為項目負責人。

我在VR裡看冬奧:運動員在我頭頂飛

▲北京大學教授陳寶權

研究人員會根據場館情況布置多台錄影機,記錄比賽現場的精彩畫面。他們在首都場館部署的40台4K陣列錄影機和3台可實作8K VR直播的相機。

我在VR裡看冬奧:運動員在我頭頂飛

▲賽場的錄影機陣列

部分細心的網友扒出錄影機陣列的相關細節,認為其廠商可能是國内錄影機品牌Z-CAM,而8K VR直播的相機可能為Insta 360影石專業級相機Titan。

我在VR裡看冬奧:運動員在我頭頂飛

▲賽場旁的Titan相機

1、VR冬奧怎麼看?親測三種VR觀賽方式

經過調查,我們發現目前共有三種方式可以感受VR冬奧的魅力:VR裝置、手機上的央視訊APP、以及H5頁面。

除了使用國内自研的VR攝像裝置之外,北京冬奧會還實作了“自由視角觀賽”,即從3DoF(即眼睛可以向上下左右看)更新到6D0F(頭部位置也可以移動)。這樣一來,觀衆就可以在任何位置觀看任何角度的比賽。

我在VR裡看冬奧:運動員在我頭頂飛

▲3DoF和6D0F的差別(圖源于網絡)

實際效果究竟怎麼樣?我親自體驗了一番,首先我用手機央視訊APP的VR冬奧觀看了2月16日的冰球男子1/4決賽。

當進入到相關頁面後,我看到畫面的正前方是一個虛拟的VR大屏,就像現場的大屏一樣,可以觀看到比賽的細節和回放。鏡頭随後會轉到運動選手身上,我可以看到他們從起點出發的動作,随後畫面會随着場上賽事的節奏自主切換角度,我也嘗試自己調整觀看角度,甚至我能看到他們擊中冰球入門的手勢動作。

我在VR裡看冬奧:運動員在我頭頂飛

▲用手機端觀看冰球男子1/4決賽的畫面

在用手機觀看VR比賽時,我仍感到一些不足之處,比如說,畫面清晰度還不是很高,畫面總會有一層灰蒙蒙的感覺,較正常的手機視訊清晰度略差一些。

但打開VR裝置後,我就不再吐槽滿是噪點的畫面清晰度了。我戴上Pico Neo 3裝置,打開央視訊VR APP,就進入央視訊專為冬奧打造的觀賽空間,海報、抱枕、奧林匹克标志,央媽一次拉滿了冬奧氛圍。

我在VR裡看冬奧:運動員在我頭頂飛

▲央視訊VR的觀賽區

不僅如此,央視訊還貼心地設計了定制個性化菜單,并在月曆中标出每天将會有哪些賽事。連我最關心的獎牌情況,央視訊都會清晰地呈現在下方。

無論是想按項目觀看比賽,還是想按日期觀看比賽,清晰、便捷的菜單設定都簡化了我查找賽事的過程,讓我以最快的速度看到想看的比賽。

我在VR裡看冬奧:運動員在我頭頂飛

▲央視訊VR APP提供的多項觀賽項目

而觀賽的形式和手機上的體驗比較類似,但整體上畫面清晰度大幅提升,我可以清晰地看到運動員做了哪些動作,就好像站在賽道旁看着運動員從自己的頭頂飛過。

我在VR裡看冬奧:運動員在我頭頂飛

▲用Pico Neo 3 VR觀賽

與現場觀賽相比,我在VR觀賽中感到比較遺憾的可能是不能感受到整展現場的歡呼聲。但僅從觀看體驗上來說,用VR裝置觀看比賽确實給人帶來不少驚喜。部分比賽過程中,導播們還通過AR技術給出一些資訊,并告知觀衆賽場上不同賽事的最新情況。

除此之外,在觀看賽事的過程中,我常常還會因為導播切換畫面而找不到運動員在哪裡,進而錯過精彩瞬間。

而手機上的H5界面多會采用360度全景圖檔,向我介紹奧運場館的相關資訊,較少涉及比賽本身。

公開資訊顯示,軟體研發和服務公司天源迪科和中國聯通合作了“中國聯通冬奧5G智慧觀賽産品創新研發項目”,場内聯通使用者可通過H5頁面或小程式接入場館邊緣媒體伺服器,獲得多視角、精彩回放、場内服務預訂等視訊服務及資訊服務。

不僅如此,VR全景服務商蛙色VR也表示他們提供技術支援和新華社聯手打造360°沉浸式漫遊場館。

我在VR裡看冬奧:運動員在我頭頂飛

▲用手機H5頁面觀看首都體育館

2、耗時長、畫面卡,VR直播難題如何解?

“觀衆可以不斷地、連續地改變視點,從不同角度觀看同一個賽事。”項目負責人陳寶權說,“不僅如此,還有機會實作電影《黑客帝國》中‘子彈時間’的炫酷體驗。”

“子彈時間”是指某個凝固的時間點,人們通過360度全景攝像觀看到那一刻的所有人和物的畫面,也是以,實作“子彈時間”意味着觀衆可以實作觀看角度自由。

我在VR裡看冬奧:運動員在我頭頂飛

▲電影《黑客帝國》中展現的“子彈時間”

但在冬奧會的賽場上實作“子彈時間”并非易事。

要知道,按照傳統的拍攝方式,一台錄影機一秒的8K畫面可能會有高達幾個GB甚至十幾個GB的内容,而幾十台錄影機同時建構某一秒的畫面可能會用到近幾百GB大小的内容素材,在過去,攝影團隊想要制作一個“子彈時間”場景,往往需要花費相當長的時間。

面對巨大的内容素材,如何實時渲染畫面、如何呈現連貫的比賽畫面、如何實時完成360度全景觀看,這些都是擺在項目研究人員面前的難題。

據陳寶權介紹,解決這些問題主要靠他們研發的“端到端自由視角視訊系統”和“VR冬奧賽事孿生推演與視聽語言創意設計軟體”。

“端到端自由視角視訊系統”不但可以在較短的時間内處理完龐大的圖像資訊,同時還能通過三維重建生成新視點的圖像,避免因現場相機個數有限導緻畫面不連貫。“如果采用足夠多的新(虛拟)視點插入,最終實作絲滑般的自由視角觀賽體驗。”陳寶權說。

我在VR裡看冬奧:運動員在我頭頂飛

▲虛拟視點效果圖(來源:B站UP主阿裡達摩院掃地僧)

而“VR冬奧賽事孿生推演與視聽語言創意設計軟體”正是針對此前VR觀賽的遺憾之處——“不知道看哪裡比較好”推出的軟體系統。

研究人員通過和一些專業人士合作,對賽場上可能會出現的精彩時刻設計視訊鏡頭軌迹,進行實時導播,幫助觀衆抓住每一個熱淚盈眶的時刻。

我在VR裡看冬奧:運動員在我頭頂飛

▲VR冬奧賽事孿生推演與視聽語言創意設計軟體示範圖(來源:北京大學)

從VR直播體驗來看,北京冬奧會給觀衆提供了一個自由視角的VR直播,比賽畫面也較為流暢。而北京冬奧會在大規模賽事中運用VR直播,以及實作360度高自由度觀看,也為VR技術在文娛領域的應用增添新的成功案例。

二、既可以休閑,又可以訓練,VR技術用途多多

VR技術帶給人們高度仿真的情景,讓人們不再受時間和空間的限制,可以瞬間進入自己希望去往的地方。這一點在疫情下擁有了更多的意義。此次冬奧會采用全封閉式管理的形式,如何給運動員們提供一個舒适、放松的環境,VR技術從中起到了不小的作用。

1、什麼VR遊戲讓運動員大呼過瘾?

除了VR技術在直播賽事上的運用吸引了不少人關注之外,VR遊戲也“蹭”了一波冬奧會的熱度。在冬奧場館内,VR遊戲區的裝置吸引了不少國外運動員在這裡流連忘返,紛紛前來打卡。

冬奧場館内的VR遊戲區不僅有太空模拟艙、4D載人深海模拟器等,讓運動員們可以一天之内上天入地,無處不去,還有模拟戰場、VR賽車等遊戲,讓運動員們大呼“過瘾”。

我在VR裡看冬奧:運動員在我頭頂飛

▲太空模拟艙

借着這次全民關注的運動盛會,遊戲廠商紛紛推出VR冬奧系列IP如《奇幻滑雪》等。HTC更是接連上線了5款運動遊戲,其中兩款遊戲《奇幻滑雪3》、《VR冬奧會》是針對VR一體機推出的。三款遊戲《極限滑雪》、《冰球大戰VR》、《Fantasy Skiing 2》是針對PC端推出的VR遊戲。

其中,《奇幻滑雪3》是目前較為熱門的VR遊戲,你可以通過VR裝置感受到滑雪的樂趣。想成為下一個“谷愛淩”?你可以先用VR裝置去體驗一下滑雪的魅力。

我在VR裡看冬奧:運動員在我頭頂飛

▲《奇幻滑雪3》滑雪場景

目前,《奇幻滑雪3》登陸了Pico應用商店等國内多家VR裝置的應用商店。

2、用VR模拟真實環境,運動員開啟“刷分”之路

像遊戲之類的VR裝置主要是給運動員們提供休閑娛樂,讓他們在緊張的賽程中放松一下繃勁的神經,而用于VR模拟訓練的裝置則不同,更高的精準度,更逼真的模拟環境才能為運動員們帶來更有效地成績提升。

像鋼架雪車、雪橇、越野滑雪等這類運動往往具有較高的風險性。同時,冰雪運動的訓練計劃會受天氣和環境的影響,一年時間裡訓練較少。VR模拟訓練器模拟的較為真實的虛拟環境,可以提供無限制的訓練環境。并且,VR模拟訓練器精準收集的資料能夠為運動員提供更多指導方向。

“這樣一來,在一些技巧方面,運動員可以一天練習多次提高熟練度。”一位參與研發的人士說道,他們還為此打造了一套六自由度電動模拟體育訓練系統。

整理相關資料時,我們發現不少北方大學參與到VR訓練模拟器研發中。

東北大學不但打造了一個VR滑雪系統,還做了個滑行速度測量機器人。機器人可以收集最真實的環境資訊,再将這些資訊同步到VR滑雪系統中,讓運動員們感受到最真實的環境變化,調整狀态。

河北地質大學同樣也制造了一款VR滑雪模拟器,模拟真實的滑雪環境,其腳下的六自由度機器人可以跟随滑雪地形進行實時的響應,為訓練者提供視覺、聽覺、風感、轉向感、俯沖感、超重感、失重感等多感官互動,為滑雪者帶來沉浸式的滑雪體驗。

現在,VR模拟訓練在不少領域已經開始逐漸落地,國外部分政府曾采用VR裝置鍛煉員工的反應能力。前不久,東方時尚公告采購1000台VR駕駛模拟器,金額達1.8億元。IDC資料顯示,2020年全球VR企業教育訓練市場規模約為13億美元。

我在VR裡看冬奧:運動員在我頭頂飛

▲用VR裝置模拟案件場景

VR訓練在冬奧場景上的運用,讓更多企業看到VR訓練的實用性以及功能性,吸引更多的玩家加入其中。

三、虛拟數字人24小時為冬奧打工?谷愛淩再現分身術

說起來你可能不信,據不完全統計,至少有25個虛拟數字人正在冬奧會24小時“打工”。

百度智能雲AI人機互動實驗室負責人、主架構師李士岩曾告訴智東西,虛拟數字人可以按場景分為服務型數字人和演藝型數字人。其中,服務型數字人往往指具有一定功能的“虛拟員工”,演藝型數字人更偏向文娛領域的“偶像”。

我在VR裡看冬奧:運動員在我頭頂飛

▲與北京冬奧會有關的虛拟數字人(來源:雷報)

最“值錢”的虛拟數字人應該屬谷愛淩的虛拟數字分身MeetGu。MeetGu出現在直播間的次日,咪咕視訊母公司中國移動的股價大幅上漲,漲幅達到10%,市值達1.44萬億元,達A股上市以來最高值。

我在VR裡看冬奧:運動員在我頭頂飛

▲谷愛淩的虛拟數字人MeetGu

事實上,不僅是谷愛淩的虛拟數字人,像徐夢桃、隋文靜、韓聰、任子威等熱門冰雪運動員均有自己的虛拟數字人。奧運會舉辦期間,這些虛拟數字人會在冬奧賽事演播室中完成滑雪賽事解說、播報及場景電商的虛拟互動等工作。

從冬奧會上,我們可以看到像這類由真人衍生出來的虛拟數字人同樣能分擔“正主”所帶來的流量效應。

那麼,數字分身和現實本人之間應該是什麼樣的關系?虛實科技CEO張金玉認為,目前,數字分身和現實本人之間的關系處在“各管各的”階段,虛拟數字人并沒有本人所具有的一些特性。“目前,國内大部分虛拟數字人都處在這個階段。”她講道。

張金玉認為,想要打造一個更具有本人特征的虛拟數字人,廠商們需要打通虛拟數字人和本人之間的資訊壁壘。“設想一下,如果你的虛拟分身能夠知道你今天看了哪些消息,并且同步學習這些知識,它是不是會對你了解更多,并且對你的興趣也一清二楚。”

從不同的發展變化來看,未來虛拟數字人也許會幫助人們從繁瑣勞累的工作中解脫出來,做更多的事情。但并非人人都喜歡虛拟數字人過度侵入自己的生活,就如亞馬遜最新的AI助手Alexa廣告一樣,主人公最後說道,“也許Alexa不能讀懂想法會更好。”

我在VR裡看冬奧:運動員在我頭頂飛

除了這類身份型虛拟數字人,功能型虛拟數字人同樣受到不少廠商的歡迎。騰訊、小冰、百度紛紛帶着自己的虛拟數字人在冬奧會上“露一手”,手語翻譯、電商帶貨、天氣播報等各種類型的虛拟數字人開始“卷”起來了。

我在VR裡看冬奧:運動員在我頭頂飛

▲手語播報數字人

冬奧會上大規模的虛拟數字人應用,一方面打破了人們對以往單闆、無趣、功能單一虛拟數字人的刻闆印象。另一方面,虛拟數字人也在受到更多企業的關注。據調查,2022年過了不到一個月,虛拟人領域融資數量已經達到近百起,融資金額達4.11億元。由此看來,虛拟數字人行業正在落地應用上進入一波快速擴張的階段。

結語:冬奧成VR落地應用大舞台

VR直播、VR訓練、VR遊戲……冬奧會上出現越來越多的VR技術,這可能說明VR技術正在迎來新的關注度。

冬奧會不但向世界展示了國内最為先進的虛拟技術,而且對内,将校内科研人員和校外科技企業緊密地連接配接在一起,換而言之,也是VR圈内的一次交流會。

在這場交流中我們能看到像百度、騰訊等大廠的身影,也能看到不少創企,比如說蛙色VR,也在其中發揮自己的力量。2022年,元宇宙的熱度似乎降溫不少,但對于VR産業的關注依然在升溫。

繼續閱讀