一凡 發自 副駕寺
智能車參考 | 公衆号 AI4Auto
精銳盡出,華為殺瘋了。
華為開發者大會2024 (以下簡稱HDC 2024)震撼開幕,“純血”鴻蒙、盤古大模型5.0、程式設計語言倉颉、5.5G……新成果接連炸場。
科技春晚全程高能,技術盛宴幹貨滿滿。
尤其是盤古大模型對自動駕駛的變革,引發行業關注。
AI生成視訊如此逼真,自動駕駛不必依賴路測。
華為盤古大模型,重塑自動駕駛
在HDC 2024上,華為官宣盤古大模型更新至5.0,多模态能力大幅提高。
所謂多模态,即盤古大模型5.0能更好更精準地了解實體世界,包括文本、圖檔、視訊、雷達、紅外和遙感等更多模态,生成的内容更符合現實規律。
從應用落地來說,聚焦自動駕駛行業,盤古大模型5.0将支援靈活定制,生成不同路況、不同光照、不同天氣的訓練視訊資料,時長最長可達1分鐘。
在現場,華為還對這項能力進行了示範:
可以靈活定制,是要生成一條空的街道,還是多車複雜路況:
天氣情況也能上上強度:
仔細觀察,會發現當天氣變化時,生成的車輛細節不一樣:
同一輛車,雨天時車燈是打開的。
如何做到這麼逼真且智能的?
背後是創新的可控時空生成技術(STGC),核心是資料和模型兩個方面。
訓練資料,華為采用六個視角相機,覆寫360度,累計采集和治理20萬幀高品質資料。
模型方面,華為在視訊生成大模型VAE和DiT架構的基礎上,新增了三個輸入子產品:
- 3D邊界框編碼器(3D bounding box Encoder)
- Bev路網編碼器
- 相機軌迹編碼器
然後使用算法處理3D邊界框和BEEV路網圖,使得盤古大模型實作多視角關聯學習,學習到多視角空間和時序一緻性。,進而生成自動駕駛訓練所需要的場景。
這有助于解決當下自動駕駛的兩個難題:
資料集的泛化和邊緣場景生成。
自動駕駛系統的訓練非常複雜,過去依賴路測,部署車隊投入大,路測采集資料成本高,時間周期長。
同時自動駕駛的能力成長,受限于遇到的邊緣場景(Corner Case),比較罕見。
而且遇到邊緣場景,針對性調整系統後,也不一定能複現出來驗證,畢竟路況車況随時在變。
而且極端地邊緣場景,比較危險。
對于這些問題,其實業内早前也提出過仿真測試的路線。
隻不過過去是,先模組化後渲染,構造仿真資料成本高,精度誤差大。
現在,華為用盤古大模型,實作了模組化仿真到AI生成的轉變。
有助于自動駕駛擺脫路測依賴,收集資料不一定非要上路,降低自動駕駛訓練成本。
邊緣場景可生成可複現,加快自動駕駛終局到來。
此前Wayve和Waabi這類初創公司,就因相關能力受到關注,英偉達等巨頭投資。
現在華為正式官宣入場,很可能會把這條賽道推向新高潮。
而自動駕駛,不過是盤古大模型重塑千行萬業的冰山一角。
盤古大模型,也隻是HDC 2024科技盛宴的其中一道主菜。
HDC 2024,重塑、更新與跨越
除了自動駕駛,在現場華為還提及了盤古大模型對各行各業的賦能,包括工業設計、建築設計、具身智能和汽車設計。
華為還特别提到了,盤古大模型對新車造型設計的利好。
盤古大模型可以将原來需要1-2年設計周期大幅縮短,造型設計師可以将自己的靈感,通過對話、畫圖與大模型互動,生成3D數字模型。
還可進行風格化調整,以及零部件編輯,變換顔色等。
生成的數字模型還可以直接輸出成3D檔案,支援10幾種主流格式。
設計師可以直接3D列印樣品,減少制作油泥模型的輪次,極大地節省成本和時間。
除此之外,其實很早以前,盤古大模型的視覺能力,就已經用來檢測汽車零部件的缺陷了。
盤古大模型更新炸場,同樣官宣更新的還有5G技術。
餘承東在現場宣布,5.5G的時延更低,連接配接數更多,今年會是5.5G商用元年。
在華為官方的預熱視訊中,最新機型Pura 70已經出現5.5G的網絡辨別,其中意味不言自明。
還是接着聊新更新對智能車和自動駕駛的影響。
據公開報道,其實從去年,有車企比如長城,就已經在試驗“5G-A(5.5G)超可靠低延遲時間汽車柔性産線”,嘗試提高生産效率。
而在自動駕駛領域,無人車每天産生的超海量資料,借助5.5G也能夠實時傳回背景算力平台,加快算法訓練。
相比盤古大模型和5.5G,可能對于普通使用者來說,最關注也是感受最直接的,還是“純血鴻蒙”,也就是Harmony Next。
新一代鴻蒙作業系統,不僅是核心、資料庫和檔案系統等等自主,還有配套的編譯器、程式設計語言、開發IDE和架構。
從最底層的核心硬體,到使用者互動的前端,每個開發環節實作自主,還有9億台裝置支撐的生态,動搖作業系統兩強格局。
不過在大會現場,談到Harmony Next的更新,華為更多地還是介紹對終端的影響。
但也能從中推測到,未來的鴻蒙車機,流暢度還會繼續提高,車機互動會有新的想象空間,
以及華為在自動駕駛的實踐,反哺到終端了。
在大會上,餘承東用L1-L5的概念,來形容劃分“純血”鴻蒙更新後,語音助手小藝的推理規劃能力。
他還在現場激動地表示:
今天,鴻蒙大勢已定。
沒有人能熄滅滿天星光。
後一句話,餘承東在4年前的華為開發者大會上就說過:
沒有人能夠熄滅滿天星光,星星之火可以燎原。
如今我們看到,盤古大模型正重塑千行萬業,5G技術持續更新,鴻蒙生态跨越式進化。
4年前的星火,真的已成燎原之勢,彙成璀璨星河。
風雪傾軋四五年,輕舟已過萬重山。
萬重山後,繼續領先。