作者 | GenAICon 2024
智東西5月6日報道，2024中國生成式AI大會于4月18-19日在北京舉行，在大會第二天的主會場AIGC應用專場上，天圖萬境創始人圖拉古以《我們的AIGC，AIGC的我們》為題發表演講。
天圖萬境是中國視聽行業嘗試用AI工具做文本擴寫、圖像生成、數字人合成制作的先行者，比一些國際頂流AI工具的問世時間更早。圖拉古說，天圖萬境迄今已擁有中國視聽領域最專業的垂直AI大模型叢集，并在今年與華為聯合推出Sora Opera，能給各式視訊配音。
圖拉古在演講中相當敢說，金句頻出，分享了自己創業路上“血淋淋的經驗和教訓”，或者調侃創業者“不要起太早，容易看不到曙光，因為資本看不懂”，稱“追風的人沒法飛起來”；或者吐槽自媒體用“炸裂”、“吊打”、“驚豔”等詞彙是瞎說，直言短期内搞不定通用大模型，預測“大部分AI大模型創業公司在5年内死去”。
在他看來，AI應該是能夠給人們帶來溫暖、彌合世界的創作工具，而不是取代人類工作的“内卷武器”。是以AI不能離開應用談技術，而是要建立到應用端的完整産業鍊。天圖萬境從AI文本創作，到視訊生成，再到服務使用者的應用端，打造了全産業鍊技術解決方案，且都早于國際巨頭釋出了對應産品，目前正在快速疊代中。
其聲音生成工具Sora Opera，可以自動感覺、智能識别視訊畫面中的實體邏輯，精準配出風格多變的音樂音效，為視訊增加聲音的魅力。還有聲音克隆工具SoundMax，不走傳統TTS路線，而是将輸入的人聲轉換成其他聲線。這樣的AI工具，不會讓配音演員失業，而是讓他們在演繹不同角色時插上飛翔的創意翅膀。
以下為圖拉古的演講實錄：
首先介紹一下我自己，我是圖拉古，是一個“帽子”搜集大師，我有很多帽子，最喜歡前三個帽子，天圖萬境的創始人、中國導演、科研從業者。
我還有一個屬性，我是跨行業的從業者，而且在一線，我是以導演的身份拍攝了很多國際大片，也拍了很多國内的片子。我從事計算機程式設計和AI，自己寫代碼。
第三個，我自己做電路設計，做電路繪畫，做生産。我是一個沉浸式愛好者，經常玩各種劇本殺、密室逃脫。原來AI需要視聽行業的人參與進來，但是視聽行業的人又不知道該怎麼開發，我碰巧介于這之間，我的優勢逐漸凸顯出來。
我分享的主題是：AIGC的我們，我們的AIGC。
一、比MidJourney更早探路圖像生成，但起太早容易看不到曙光
先說“AIGC的我們”。
有人說電影是一門綜合性藝術，它從視聽技術到制造生産技術，再到排程與管理能力，到故事與叙事，最主要的是情緒和心理學都很重要，本質上講，是從文本到視訊這一件事。
從文本到視訊在今天的時代很簡單，文本到視訊、文本到圖檔，再到合成、剪輯、視訊發行，其中文本就是劇本，我們現在熟悉的軟體都可以做。
到今天為止，AI時代，文本生成有GPT，圖檔有Stable Diffusion、Midjourney，合成有Wonder studio，剪輯Meta似乎在做，視訊Sora，發行還是老牌發行，世界的格局沒有變化，因為賺錢的地方沒有發生變化。
前面都是技術在疊代，下一個時代将會産生産業的疊代，發行怎麼變？這些年我們在這些領域做了什麼工作？以及為什麼說現在做AIGC的同行們都是“弟弟”。
第一個，文本。看這張圖，在輸入文字的位置添加新故事，加引導詞，輸入三個引導詞就可以自動生成一段故事，這是最早的AI擴寫。
下面是用來整理語義分析的，分析人物關系的，分析時長的，再下面是分析故事和情感節奏的，這隻能用AI做，不然就會把“皇上急的像熱鍋上的螞蟻”，認為是一種動物而不是一種情緒。這是最早的文字生成。什麼時候？2021年9月份。誰在做這件事？隻有我們在做。
第二個，圖檔。這個大家都很熟悉了，放一個原始圖像，就可以看到實時可編輯的圖像，下方是參數拖拽區。左側是2021年5月份我們釋出的産品，右側是2023年馬普所潘教授釋出的，當時震驚整個娛樂圈。
上面是選擇模型、風格的區域，選擇輸入風格，輸入一張圖檔，按照圖檔風格生成圖檔。
這裡是輸入漢字的圖像實時生成，這在今天來看每個人都極其熟悉，甚至嗤之以鼻。但把時間往回倒一倒，Stable Diffusion是2022年7月份，Midjourney是2022年3月份，天圖是2021年9月份。
我們以前做事不會在網際網路上留足迹，碰巧這件事情留下了足迹。右圖是跟聯想ThinkPad做的現場為期七天的實機示範。
第三個，合成制作。通過4張圖檔重建一個我的數字人，通過一段視訊重建整個3D場景。我們還釋出首條支援NeRF渲染的循環引擎管線，這是在2022年9月份。右側的大家也很熟悉，Luma AI，當時全世界都很震驚，時間是2022年11月份，而我們在2022年9月份就釋出了可以商用的産品。
還有人體穩定跟蹤，大家都很熟悉，還可以把鏡頭中的人物完美地擦掉，這兩者結合到一起，是Wonder studio，它是2023年3月份，天圖是2022年11月份。
這個案例非常明顯，做這麼多，我們也沒有做PR，沒有被大家記住。我們有很深的感觸：不要起太早，容易看不到曙光，因為資本看不懂。
二、“他們看不懂，看不明白，也不願意學習”
有一個很知名的專家問我，你連一個傳感器都沒有，怎麼叫感覺？我現在可以告訴他，這就叫感覺，感覺是通過智能來判别這個世界的。這是我得到的第一個經驗，在創業的時候不要起太早，因為看不到曙光。
第二個，他們看不懂，看不明白，并且也不願意學習。“他們”不止指資本，也指創作身邊的每一個人，他們隻能跟着潮流順着大勢而為。我想說一句話：“追風的人是沒法飛起來的，因為風筝是逆風飛翔的。”我們要準确判斷下一個點在哪裡，從現在開始往下一個點走。
第三個經驗，投資絕大部分是FOM（afraid of missing），到今天為止，他們對這件事情看起來也是迷迷糊糊的，你去問投資機構，什麼叫AIGC？他們隻能說一個網上能查到的詞，沒有經過仔細思考，沒有經過認真對産業調研的人很難明白AIGC的明天在哪裡，這就是血淋淋的經驗和教訓。
三、自媒體用“炸裂”“吊打”是瞎說，大部分AI大模型公司在5年内死去
下面說說我們在積累經驗之後又做了什麼事，現在逐漸被大家關注起來了。
資本眼中的AI大模型：以前100個人幹活兒，通過AI自動化3個人幹活兒，生成了各種各樣的利潤，裁員、财源。
一個公司瘋狂PR以後，被資本投了以後，創始人自己套殼，自己訓練，結果一用自己的産品，這個東西不能用！這怎麼辦？瘋狂地找，終于找到一個落地場景，然後跟媒體說，在這個場景我們可以做這件事，然後無限放大。
自媒體用的什麼詞？“炸裂”、“吊打”、“驚豔”，這些詞能在這兒用嗎？這是瞎說。實際是什麼樣的？這就是它們的實際情況，這是不可避免的問題，因為馬車在創造初期也不能一下子跑十公裡，這是時代發展的必然結局。
我們現在的AI非常激進，仿佛進入了豐富且多元的生态，但如果我們用一用這些産品會發現，你的生氣指數會上漲。但是我們需要用發展的眼光去看待這件事情，十年以後的AI是什麼樣？它一定是非常豐富且充滿了自動化的過程。
我們還講過一句話，今天的各種企業在這個行業的PR中，仿佛要使用AI這種技術把整個人都替代掉，讓整個社會都工業化，其實換句話說，他們在制造“槍”然後來殺掉彼此。
AI的初心應該是像《血戰鋼鋸嶺》一樣，我不帶槍，但是可以縫合這個世界，希望未來有更多做技術的人可以用這些技術來縫合這個世界，讓每個人、每個個體都能夠從中享受到AI帶來的快樂，這很重要。
人類的目光總是是很短淺的，他們想一口吃個胖子，是以在講大模型，大模型意味着一個輪船可以海上跑、天上飛、道地裡面鑽，這叫大模型。但到頭來解決問題的還是專用模型，輪船隻能在海上，飛機在天上，有一天我們希望有兩栖東西産生，但是現在這個時間點還不能擁有，此時此刻我們的生産力、物力、算法跟不上，需要等一等。
大部分AI大模型創業公司會在5年内死去，我看到這個行業的人沒有技術壁壘，也找不到應用場景，解決不了真的問題，而且沒有錢繼續燒。此時此刻我把這個話放在這兒，再過5年後你們翻回來找這句話，如果發現這句話是錯的，請在評論下面罵我。
我們不應該隻談大模型而放棄專用模型，不能隻練大腦不練肌肉。
四、打造視聽領域垂直AI大模型叢集，聯手華為推出視訊配音工具Sora Opera
AI大模型在各行各業都有使用，我們應該怎麼發展？還是以我們的視聽行業為例，我們最早在布局這個産業的時候，别人說我們是騙子，因為他們不懂什麼叫模型。
到今天為止，我們已經擁有中國視聽領域裡面最專業的垂直AI大模型叢集，本來是垂直AI模型叢集，但我的合夥人說你把“大”加上吧，不然别人聽不懂，是以我們叫AI大模型叢集，會在北京國際電影節釋出。
先講我們做了什麼。Sora Opera，用了半年多了，今年跟華為聯合推出。什麼是Sora Opera？它本來不叫這個名字，Sora出來之後，一些人建議說最好跟Sora有關，我們就起這個名字Sora Opera，它可以給所有生成式視訊，所有手機拍的視訊進行配音。
我們先來看圖檔上這個小怪物，再來看猛犸象。在展示更多之前，我想說一下，人們仿佛在按照計算機的邏輯适應計算機，比如你想需要一段好的文字或者視訊，必須要輸入适應計算機的提示詞，這其實是反着發展的。有沒有一種途徑可以讓人不去輸入Prompt，直接點上傳下載下傳？可以，我們的Sora Opera去除所有的Prompt，這意味着你的模型必須識别圖檔類的資訊。
我們來聽第一個、聽第二個。每一個故事都是壓着節奏，手碰花，花會響，不碰花，花不會響，我們按照時間一緻性來了解這個事情，讓這個模型具備視聽領域裡面的智能。它可以識别很多個電視裡面的内容，并且雜亂生成。它可以識别火車聲音從遠到近的效果，還有跳舞的小動物、自然環境。
未來哪裡能用到？各家手機都在宣傳，“我家手機可以一鍵成片”，如果那個成片沒有音效，相當于這個世界沒有聲音，隻有視覺是不夠的。未來的所有領域都可以使用這樣的技術。
再說一個，SoundMax。聲音是人類獲得資訊34%的主要因素。這個功能主要用來配音，用我的聲音模拟各種各樣的聲音，我們不走TTS的路線，TTS是輸入文字變成聲音，我們需要有人在後面來模拟千行百業的人。
我們先聽第一個人叫白小姐，第二個人的聲音是說書人，這兩個人都是我用手機錄的，現在我們聽聽經過AI處理之後的兩個人。我們希望未來AI技術誕生以後讓每個個體都是超級個體，讓創作去中心化。
五、未來AI視聽的機會在哪兒？
最後再簡單說一說發行，未來的機會在哪裡？
我們知道此時此刻是經濟下行，1905年到1914年美國的變化恰如此時此刻這個時代所經曆的變化。工具創新以Sora們為例，會出現一個結果，過度電子化，因為生産内容極其容易，網上線上本來就不缺内容，又因為過度容易的生産工具導緻内容泛濫，就會出現過度電子化。
那麼新業态在哪裡？新工具誕生了，怎麼沒有新業态？新業态可以這麼了解，首先沖擊兩個不好的地方，第一是流媒體平台，本來流媒體平台就是有豐富的内容，現在又沖過來一堆動态PPT，人們非常焦急，甚至會花時間去甄别哪個真哪個假。
第二個，電影院，每個使用者都有機會表達自我，關注我發了朋友圈誰給我點贊，電影院的叙事方式已經不太适合當下的觀衆。
第三個，遊戲平台，做遊戲會越來越容易，容易的不是程式設計，容易的是設計，美術越來越容易，程式設計方面也會推進，是以AI會對它們有沖擊。
我簡單總結了一下，一切非真人互動和非真實體驗的企業和産業都會受到這波沖擊。
新機會在哪裡？第一個是XR産業，第二個是線下娛樂産業，未來巨大的機會在這個地方，我做了一個總結叫沉浸式産業。
這個産業有幾個屬性：第一，高科技加持。這個産業必須有科技，不然這個産業沒法變革。第二，強社交屬性。經濟下行，人們心理壓力會大，人們必須回歸到線下，并且見到真實的可确定性。第三，條件十分便宜，便宜到你喝一杯咖啡的價格就可以玩一個小時、兩個小時。
第四，模式可複制，全國各地可複制才能掙錢。第五，内容更新快，每天有兩個新的内容可以玩。最後，成本低，内容快就代表着成本低，而這一切全部是AI和今天的電子工業給我們帶來的機會，沒有這兩個産業的出現就沒有這樣的機會。
我認為，未來AI視聽的機會線上下，而不線上上。至少今天的傳統網際網路應該是沒什麼機會了，不信可以看看，他們能做的就是投資，他們想真正研發出一款使用的産品太難了。
線上下可能會有哪些？今天不在這兒賣關子了，希望大家快來成為我的朋友，我們一起讨論線下在哪裡。
以上是圖拉古演講内容的完整整理。