作者| 阿裡文娛資深算法專家 胡堯
**一、文娛消費新體驗-Free Viewpoint Video
**
面向文娛消費新體驗，文娛算法團隊基于整體的視訊生産、播放、互動式體驗等環節做了非常多的技術探索，在視訊子彈時間的基礎上進一步延展，延伸成更加經濟通用的Free Viewpoint Video技術，建構完善的現場-雲-邊-端的技術鍊路。
今年優酷與CBA達成全方位的合作，在新賽季首次落地互動FVV體驗，變革傳統體育賽事的觀看體驗。我們還主導建設FVV視訊技術國家标準，同時承擔了國家“科技冬奧”“冰雪項目互動式多元度觀賽體驗技術與系統”項目，讓更多普通使用者享受到新一代觀看體驗。
二、視訊消費商業化新模式-創意廣告
在視訊消費商業化新模式上，重點在創意廣告領域，打造動效酷炫、更原生、可互動的廣告形态，通過規模化實作中長尾内容的變現。
具體是建構了綜合的三維環境感覺和了解算法，在多場景多模态的視訊内容了解、雲端結合的CG 渲染引擎等領域都有深度探索，并且建構雲端結合的c c級渲染引擎，實作AI兩大平台（視訊打點平台、視訊特效生産平台）、一個中心的戰略（創意廣告制作中心）。
三、視訊創作新平台-基礎素材自動化生産與檢索**
在視訊了解領域的另一個重要應用，就是搭建了視訊創作新平台。
首先，我們實作了基礎素材的自動化生産與搜尋，将傳統的靜态人物動作和場景實作更新到shot 級别，支援動态素材的檢測與識别。
同時，實作精細化摳圖，包括對動态人物和物體場景的提取，使這些素材可以被創作者更快速的應用到新的創作環境中。通過互動式的精細化分割算法，動态地将經典視訊中的素材提取出來，實作簡易化綠幕的效果。
當大量的素材被生産出來，我們同時提供基于準素材級别的智能化檢索系統，使用者隻需要通過語義的文本或語音輸入，就能實作對整個素材庫的檢索。例如使用者搜尋“吳倩擁抱”，系統就會呈現出整個《冰糖炖雪梨》中有吳倩擁抱的場景。
四、視訊創作新平台-封面圖自動化生産**
另外，我們實作了封面圖自動化生産。基于主要人物、場景、美學評級、元素多樣性等方面生成不同次元的封面圖，并提供智能裁剪服務，滿足16:9、4:3或者3:4等各種場景需求。同時在某些場景中實作動圖的自動化生産，即實作千人千面的内容+素材的統一個性化推薦，助力營運分發的提效。
五、視訊創作新平台-模闆式視訊半自動化生産
鑒于優酷有海量的IP版權内容，我們研發了一系列的剪輯合成技術，自動對視訊的故事線、内容模闆進行提取，并在此基礎上在海量視訊中進行智能化的二次創作，實作如節目卡點剪輯、Video Highlight & Summary技術生成的前情提要等産品。同時具備視訊的形态轉換技術，将橫版的視訊通過AI算法，識别顯著性主體區域并進行美學評判，實作豎版視訊的自動化生産。
這些技術能夠有效的為商業化提供更多素材，同時為B端提供更多能力。
在這個基礎上，我們才能實作基于元素級的視訊深度了解技術，我們将傳統的基于使用者行為的内容分發體系和基于視訊内容了解的視訊内容分發體系進行了有效結合，實作了群體智慧和計算機視覺在美學和AI上的融合，實作了從整個封面圖内容的原資料分析，到整個使用者行為偏好的判斷，實作千人千面的内容加素材的個性化推薦，有效提升整個業務場的分發效率。