天天看點

讓馬斯克跳“科目三”,AI視訊新玩法!

作者:遊戲AI君

近日,繼PIKA、Runaway等大熱的應用後,AI視訊生成又有新玩法,在全球社交網絡平台刷屏,阿裡視訊生成AI模型Animate Anyone上線,可以通過上傳圖檔,讓照片裡的人動起來!

讓馬斯克跳“科目三”,AI視訊新玩法!

上個月,号稱是“視訊版GPT”的PIKA爆火,由斯坦福華人美女博士退學創業,OpenAI科學家Karpathy、Hugging Face聯合創始人Clem Delangue多人領投5500萬美元,AI視訊生成正在掀起一輪新的熱潮。

讓馬斯克跳“科目三”,AI視訊新玩法!

使用者隻需要輸入文字Prompt,就可以對視訊指定區域進行更改,達到一鍵換裝的效果。

讓馬斯克跳“科目三”,AI視訊新玩法!

而AI視訊領域又有了新的落地應用,即上傳圖檔,讓照片裡的人動起來,首先被盯上的是去年廣西《科目三》,為全球短視訊領域的出圈梗,火遍各大平台。

隻需要上傳一張馬斯克的圖檔,就可以讓馬斯克直接跳“科目三”!

讓馬斯克跳“科目三”,AI視訊新玩法!

後續許多網友又制作了蘋果CEO庫克、Meta CEO小紮等人的視訊,視訊動作看起來比較流暢,甚至以假亂真!

讓馬斯克跳“科目三”,AI視訊新玩法!

這一次AI視訊主要基于AI模型Animate Anyone,與上次在朋友圈刷屏的妙鴨相機,同樣都是出自阿裡團隊之手。

讓馬斯克跳“科目三”,AI視訊新玩法!

Animate Anyone希望可以為任何人制作視訊動畫,給一張有明顯人物姿勢的角色圖檔,就能夠生成可控的圖像和視訊動畫,核心依然是之前的擴散模型Diffusion models。

讓馬斯克跳“科目三”,AI視訊新玩法!

項目設計了 ReferenceNet 算法,通過空間注意力(Spatial-Attention),來合并細節特征。保證圖檔生成的動作序列,能夠連貫起來,這些動作序列可以是跳舞、走路等等。

讓馬斯克跳“科目三”,AI視訊新玩法!

搭配上Outfit Anyone,即可實作為任何角色設計更改服裝,并且生成動作,未來落地應用範圍極廣!

讓馬斯克跳“科目三”,AI視訊新玩法!

繼續閱讀