天天看點

冬奧“黑科技”!賽場上的“時間凝結”新視角來自這個科研團隊

作者:天目新聞

凝結時間、定格瞬間、移動視角,北京冬奧會多項體育賽事的轉播中,自由視角技術為觀衆帶來了不同于往屆比賽的精彩瞬間。

在冰壺賽場以及國家速滑館,上海科技大學聯合企業一起參與設計了自由視角采集系統,在“冰立方”部署了64套4K超高清多視角相機系統。在國家速滑館,他們部署了80套4K超高清多視角相機系統,從各個方位和角度拍攝速滑運動員的身影。

自由視角轉播有兩項關鍵技術:一是相機系統的三維标定,使各個視角拍到的畫面在空間上形成連續性,不會上下跳躍,進而能順滑地進行視角切換;二是基于神經網絡渲染(NeRF)的自由視點視訊生成技術,計算機系統根據轉播畫面自動生成一些虛拟畫面,與真實場景無縫銜接。

海量資料與深度學習結合,可以讓三維渲染的過程自動化、智能化。因為4K多視角相機的部署成本頗高,要盡量減少裝置數量,人工智能系統生成以假亂真的虛拟視角場景,就能降低自由視角轉播的成本。

冬奧“黑科技”!賽場上的“時間凝結”新視角來自這個科研團隊

速滑彎道處部署的4K超高清多視角相機系統拍攝的畫面

項目負責人馬文廣展示了兩段視訊。隻見在冰壺比賽中,運動員在投壺瞬間的畫面會被定格,仿佛時間凝結;與此同時,轉播視角開始轉動,讓觀衆看到運動員投壺瞬間的各個角度場景。另一段速滑視訊的亮點在彎道處,隻見兩名選手過彎道時,時間仿佛凝結了,同時觀賽視角開始轉動,從運動員身前轉到身後,讓觀衆看清兩人的滑行姿态和位置關系。

“過彎道是速滑選手超越對手的好機會,也是容易出現失誤的地方,是以我們把自由視角和‘時間凝結’特效主要安排在彎道處。”馬文廣介紹說。

随着5G時代的到來,這種技術将得到越來越多的應用,并讓移動用戶端和智慧電視使用者自主選擇觀賽視角,實作個性化、沉浸式智慧觀賽。未來,人工智能、數字孿生、自由視角等技術應用于智慧場館、智慧觀賽等應用場景,将為觀衆帶來更具看點的觀賽體驗。

(原标題《冬奧“黑科技”!賽場上的“時間凝結”新視角來自這個科研團隊》)

繼續閱讀