
5 月 27 日,CCBN(第二十八屆中國國際廣播電視資訊網絡展覽會)在北京隆重召開,在本次的 “CCBN 年度創新獎” 評選中,阿裡雲視訊雲憑借 AI 編輯部的傳媒行業專業解決方案獲得 CCBN 産品創新傑出獎。
随着技術的發展,5G、4K、AI 等新技術的創新及應用,已經是媒體行業轉型的共識。面對 9.86 億手機網民,充分發揮 5G 網絡技術優勢,建構手機小屏和電視大屏融合傳播的全媒體分發體系成為媒體行業發展趨勢。在新的傳播形式下,使用者更傾向于個性化的視聽需求,這對傳媒行業内容制作時效和制作産量帶來新的要求與挑戰。如何運用人工智能和資料技術提升視訊的制作時效和制作産量,成為 AI 編輯部媒體融合轉型的重點工作之一。
生産制作是整個制播流程的核心,它連接配接了采集,播放和存儲,也隻有讓制作過程全面雲化之後,才能真正提升融合媒體的效率。在整個融合媒體制播流程當中,新更新的 AI 編輯部 2.0 融合了短視訊制作和高碼率精編,通過大量使用 AI 技術,實作大小屏的雙向互動和融合生産。同時,融合雲、端協同生産的方式,加速整個内容生産的效率。
從實際操作層面,AI 編輯部通過真 4K 的雲端制作、4K 視訊增強、雲上融媒短視訊制作三個細分方面來實作:
首先,在 4K 雲端制作的基礎設施方面,AI 編輯部做的主要創新是引入了 SCC 高性能計算和 CPFS 并行檔案系統。針對雲端制作的高性能需求,實作計算節點與存儲節點之間低延時互聯,滿足更佳的制作體驗,同時避免虛拟化損失,進一步提升性能。針對雲端制作的高存儲容量和帶寬需求,CPFS 提供随存儲節點的線性擴充吞吐能力,單叢集最大 300GB/s 吞吐能力。AI 編輯部提供了豐富的适配于傳媒業務的資源,包括 FPGA、GPU 等各類個性化硬體裝置,以滿足不同業務訴求。此外,AI 編輯部針對 GPU 進行了大量的優化,包括 GPU 的虛拟化,共享以及赤化,能夠極大的提升 GPU 的使用率,降低雲端制作的成本。
其次,在 4K 視訊增強方面,AI 編輯部主要通過視訊超分,視訊插幀和色彩增強三個核心技術,來全面提升 1080p 及更低品質視訊的畫質,在幀率、分辨率以及色彩三個方面全部達到超高清視訊要求。AI 編輯部提供的 4K 增強能力,既滿足專業标準,也就是總局在《4K 超高清電視節目制作技術 實施指南》中的标準定義,也滿足行業内專業的技審和監看要求,在滿足客觀參數标準的同時,在主觀視覺體驗上有顯著提升,包括細節還原、噪聲抑制、畫面流暢、視訊亮度、色彩對比度和明暗細節保持等。在 AI 視訊超分方面,AI 編輯部采用深度學習的方式,對畫面進行無損放大,能夠實作分辨率 4 倍提升,對人像、場景等細節進行修複還原的同時,能夠抑制塊噪聲、壓縮噪聲等畫質損傷,使畫面更銳利。AI 編輯部創新的提出了重點部位的增強,以最小代價,做到最有效果,如重點優化人像面部,對人的皮膚紋理、毛發細節等實作更好的修複還原。
最後,在雲上融媒短視訊制作方面,結合當下短視訊熱點及使用者喜好,從制作短視訊立足點出發,AI 編輯部有以下 5 個核心優勢:
1、AI 編輯部提供了強大的預測和評估能力,來幫助編輯判斷要做什麼樣的短視訊,進行有針對性的制作。
2、AI 編輯部提供了強大的多模态标簽能力,來重新定義視訊的内容,它綜合利用圖像,語音,文字等多種 AI 能力,體系化産生标簽。
3、針對檢索的痛點,AI 編輯部提供了強大的多模态檢索,它包括文搜、圖搜、視訊搜以及支援自然語音了解、知識圖譜等全流程多模态檢索能力。
4、提供海量、多類别的視訊模闆,實作短時間産出大量、專業的短視訊。
5、AI 編輯部提供了豐富專業的智能輔助工具,可以場景化的滿足快速短視訊制作需求。
AI 編輯部 2.0 釋出以來,人民日報技術部聯合阿裡雲視訊雲,應用該能力于兩會的内容生産,采用阿裡雲的 AI 技術,經過人民日報的海量資料訓練,結合人民日報的業務場景進行 AI 應用創新。AI 編輯部 “會看、會聽、會悟、會查”,可實作各類新媒體産品的自動化、批量化、智能化生産,實作多模态檢索、智能清除、智能視訊制作等功能,極大提升新聞生産效率,全面助力人民日報兩會報道。經過不斷的疊代和完善,在 2021 年的兩會前夕,阿裡雲視訊雲針對人民日報社的 AI 智能編輯部,進行功能的全面上新更新,融合五大全新 AI 能力,助力報社全媒體兩會報道提質增效。
過去,AI 編輯部廣電在本地使用專業裝置進行高标清視訊的制作。
現在,AI 編輯部使用 IP 化、集約化和虛拟化進行專業裝置和制作軟體的解耦。
未來,通過 AI 編輯部,阿裡雲視訊雲将協同更多的合作夥伴,使用大資料和人工智能技術,提供遠端化、互動化、智能化的雲端制作能力,完成更多可供想象的業務場景,助力傳媒行業的數字化轉型更新。
「視訊雲技術」你最值得關注的音視訊技術公衆号,每周推送來自阿裡雲一線的實踐技術文章,在這裡與音視訊領域一流工程師交流切磋。公衆号背景回複【技術】可加入阿裡雲視訊雲技術交流群,和作者一起探讨音視訊技術,擷取更多行業最新資訊。