天天看點

視訊雲肖長傑:視訊AI科技助力短視訊生态

人工智能技術是當今炙手可熱的技術領域,它在制造、家居、零售、交通、安防等行業的應用已經是大勢所趨。在本月雲栖Techday音視訊技術沙龍中,阿裡雲視訊雲産品專家肖長傑為我們分享了一些AI技術在視訊中應用的小趨勢,帶大家回顧了AI是如何滲透到了短視訊生産中的各個環節中的。

趨勢一:AI技術創新已經滲透到了短視訊各個環節。

可能我們沒有注意到,其實人工智能技術已經應用到了視訊的生産、傳輸、消費等各個階段。比如,在使用者創作階段,基于人臉識别及跟蹤技術實作瘦臉、大眼、美白功能已經相當常見;當視訊上傳到服務端之後,我們會對視訊内容進行稽核、去重、溯源等處理,并進一步對視訊的打标、分類,同時采用AI技術去定義最有美學感的封面,便于完成使用者個性化搜尋、智能推薦等動作,提升使用者的點選率和體驗。

趨勢二:算法在資料積累到一個臨界點後,才會帶來爆發。

視訊雲肖長傑:視訊AI科技助力短視訊生态

這裡舉個我們非常熟悉的例子,今年9月,移動資訊的獨角獸平台趣頭條赴美上市了,股價更是一路飙漲。趣頭條的安裝使用者數在2018年達到一定數量級,伴随着使用者數增多,上傳視訊數也成倍增長,是以到達了某個資料積累的臨界點之後,個性化推薦的算法開始發揮其強大的作用,使用者DAU激增。

趨勢三:使用者對視訊品質要求高,短視訊雖短,但處理流程趨于精細化。

移動網際網路時代視訊量暴增起來,但是其中不乏一些低品質的内容,比如一些網際網路搬運工的作品,他們在網上下載下傳視訊後經過批量地二次加工,再上傳到網上去。這種情況對于原創者是個緻命的打擊,同時也影響了平台的使用者體驗。是以,現在一般平台都采用多重方式,對視訊的品質進行把控稽核。處理流程大概是:面對平台100個視訊,去重和版權違規過濾掉一些視訊,涉黃又過濾了一部分視訊,最終到轉碼的時候可能隻有70個視訊,整個處理流程變成的好處是,轉碼和存儲的量會大大降低,使用者體驗也會相應提升。

視訊雲肖長傑:視訊AI科技助力短視訊生态

阿裡雲視訊AI解決方案典型場景分析

采用視訊DNA技術實作視訊的去重、溯源與盜版打擊

短視訊平台通常會面臨視訊大量重複的情況,是以在整個視訊AI的應用中,怎麼樣去辨識視訊的唯一性,以及根據内容分析來追溯視訊來源是第一步關鍵所在。比如下面的攻擊舉例中,視訊左下角的黑色鍵盤被稍稍做了一點改動,又上傳到平台上了,這樣的重複内容破壞了使用者的體驗,又會給平台帶來大量資料備援,也損害了原創者的利益,視訊AI就可以幫助平台高效地判定對視訊的剪拼改編行為。

視訊雲肖長傑:視訊AI科技助力短視訊生态

這裡面所用到的視訊DNA,它的技術原理是:當你上傳一個視訊的時候,可以生成唯一的指紋,指紋的特性是唯一性,即兩個不同視訊擁有相同DNA的幾率低于千萬分之一,接近于0,同時具有穩定性,它不會随音視訊檔案的格式轉換、剪輯拼接、壓縮、旋轉、增加logo等變換而變化。是以當其他視訊上傳的視訊,你就可以再在視訊庫中與現有視訊做檢索比對,相似性達到一定程度,就被證明重複性視訊。

同時,我們運用視訊DNA在做相似性溯源的時候,會對視訊内容關聯關系進行挖掘,對視訊内容制作路徑溯源。它的應用場景是:平台可以先将電視劇的長視訊錄入庫中,當使用者看了長視訊後,可以把相應的短視訊做推薦,根據使用者偏好進行推送,提升使用者體驗。

此外,視訊DNA可以配合DRM數字版權保護技術(沒有授權的賬号不能播放)和視訊水印(專屬LOGO識别),更好的打擊行業盜版。

視訊雲肖長傑:視訊AI科技助力短視訊生态

談到盜版,還有非常關鍵的一步是存證。視訊DNA和存證體系做關聯,推出了可信數字内容版權服務。方案運用了區塊鍊将DNA等關鍵資訊上鍊,實作多方透明共享、無法篡改和删除,進而建構擁有版權存證、侵權追溯和版權交易等能力的平台。可以重塑版權價值,并提供侵權監測、法律維權、IP孵化等相關服務,進而助力提升全社會的版權意識。

視訊雲肖長傑:視訊AI科技助力短視訊生态

更低成高效率的視訊稽核

在最開始第三個趨勢中,我們也提到,視訊在去重後會進入稽核階段。低成本高危視訊稽核方案可以針對色情、廣告、暴恐、涉政、不良場景、視訊黑庫等做稽核,它具備兩個特點,第一是色情圖檔識别準确度高于90%,模型高度靈活,可根據使用者要求實時調整生效;第二是能夠針對二維碼、文字、logo等内容多層防護,層層過濾,以最快的速度達到最大的效果。

通常内容稽核需要截取視訊幀進行排查,那在直播中,我們通過業務截幀政策決策系統,先判斷是否是高危業務,如果是高危的話,進行高頻截幀,加大稽核力度,如果不是高危業務,可直接進行關鍵幀截取,排除違禁内容。這樣可以實作成本的節約與效率提升。

視訊雲肖長傑:視訊AI科技助力短視訊生态

更“智能”的視訊轉碼——窄帶高清2.0

對點播來說,單視訊帶來的流量帶寬非常大,那麼如果有一種技術能讓熱點視訊的單視訊帶寬都相應減少的話,那對整個流量帶寬的節省是非常有效的。

阿裡的窄帶高清技術精髓就在于使每一個碼率配置設定到最需要它的地方,利用人眼習慣來強化聚焦區域的碼率,在脫焦區域少配合一些碼率,通過幀間、幀内的碼率配置設定,讓整個視訊的品質更高。在節省碼率的同時,也能提供更加清晰的觀看體驗,同等視訊品質下最高節省 20-40%帶寬。

視訊雲肖長傑:視訊AI科技助力短視訊生态

基于視訊内容分析搭建智能推薦與智能生産系統

内容分析和使用者标簽挖掘是搭建推薦系統的基石。它可以應用在兩個場景之中,第一個場景是:當上傳一個短視訊,系統會将其先拆成最低的元素:聲音、圖檔、文字等,對基本次元做一些識别與分析,進而對視訊采取分類、打标簽等動作,選取最佳的視訊封面,對于後續的廣告推薦、内容個性化推薦有了基礎輸出。以下整個過程可以在阿裡雲官網的視網膜系統中體驗:

https://retina.aliyun.com
視訊雲肖長傑:視訊AI科技助力短視訊生态

第一個是通過内容分析幫助視訊内容更好地消費,那麼反過來思考,我們的視訊如果都是人去産生,是不是效率太低了呢?我們能不能通過一篇文章、一句話、甚至一個标簽,生成一段視訊?

是以有了第二個應用場景,通過視訊智能産生系統,輸入視訊、音頻、文字等資訊,一系列分析後,可以從庫裡拿一些圖檔、文字、聲音,去生成一個視訊。在今年世界杯的時候,阿裡雲視訊AI技術通過下圖的方案,在比賽結束後幾分鐘内快速生成了明星集錦視訊,

點選跳轉檢視集錦

以上視訊都是機器自動生成的,極大地提高了視訊生産效率。

視訊雲肖長傑:視訊AI科技助力短視訊生态

以上就是本次肖長傑的分享内容,感興趣的使用者歡迎登陸官網了解阿裡雲視訊AI産品家族:

視訊稽核-多元度精準識别違禁内容

視訊DNA-視訊查重 原創識别 視訊溯源 廣告分成

視訊智能生産-将視訊AI與視訊基礎服務打通,提高效率

視訊多模态内容了解-自動輸出視訊的多元度内容标簽

智能封面-最優關鍵幀作為視訊封面,提升點選轉化及使用者體驗

智能視覺-為零算法基礎的開發者和企業提供定制化模型訓練能力

阿裡雲開年Hi購季,視訊直播、視訊點播、CDN全線折扣,錯過這次,再等一年! 點選了解活動詳情

視訊雲肖長傑:視訊AI科技助力短視訊生态
視訊雲肖長傑:視訊AI科技助力短視訊生态

繼續閱讀