天天看點

加速智能汽車駛入AGI時代,商湯絕影系列原生态大模型亮相車展

作者:autocarweekly

2024北京國際汽車展覽會(以下簡稱“2024北京車展”)今日隆重舉辦,商湯絕影攜系列原生态大模型及相關産品矩陣首次亮相北京車展。

作為首個提出感覺決策一體化自動駕駛通用模型的公司,商湯絕影在本屆車展上首次向公衆展示了面向量産的真·端到端自動駕駛解決方案UniAD(Unified Autonomous Driving)的道路測試表現,同時還帶來了以多模态場景大腦為核心的AI大模型座艙産品矩陣以及全新座艙3D互動示範,全景展示了通用人工智能(AGI)技術驅動的靈活自适應、深度個性化、安全可信賴、有人文關懷的未來出行全新體驗。

商湯科技聯合創始人、首席科學家、絕影智能汽車事業群總裁王曉剛表示:“未來汽車智能化的競争,本質上是通用人工智能技術融合應用的比拼。商湯絕影緻力于成為加速智能汽車駛入AGI時代的核心技術夥伴,給智能汽車産業帶來生産效率和互動體驗的雙重革新,将攜手合作夥伴提供通用人工智能技術驅動的智能汽車全新體驗,共同定義未來出行。”

加速智能汽車駛入AGI時代,商湯絕影系列原生态大模型亮相車展

(商湯絕影首次亮相北京車展)

像人一樣開車!真·端到端自動駕駛解決方案UniAD上車首秀

憑借前瞻的行業洞察和率先布局,商湯及其聯合實驗室在2022年底便提出了行業首個感覺決策一體化自動駕駛通用模型UniAD,并在次年榮獲2023年國際計算機視覺與模式識别會議(CVPR)最佳論文,引領端到端自動駕駛的創新潮流。

此次在北京車展上,商湯絕影以UniAD自動駕駛解決方案令人驚豔的實車測試成果展現了中國端到端智駕的實力。在無高精地圖條件下,僅依靠視覺感覺的實際道路測試成果。無論是複雜城市道路還是無中線的鄉村道路上,車輛能高效準确地完成包括大角度左轉上橋、避讓占道車輛及施工區域、繞行跑步行人等一系列高難度操作,做到“像人一樣開車”。

加速智能汽車駛入AGI時代,商湯絕影系列原生态大模型亮相車展

(搭載UniAD方案的車輛可真正做到“像人一樣開車”)

今年年初,特斯拉開始向部分使用者推送FSD V12版本的端到端自動駕駛方案,業内随之出現了越來越多的“端到端”智駕方案,不過大部分端到端方案采用的是更容易落地的由感覺和決策兩個模型組成的 “兩段式”架構,兩個模型之間依然存在資訊傳遞過濾或丢失的問題。而UniAD将感覺、決策、規劃等子產品都整合到一個全棧Transformer端到端模型,實作感覺決策一體化的真·端到端自動駕駛。

加速智能汽車駛入AGI時代,商湯絕影系列原生态大模型亮相車展

(UniAD真·端到端:感覺決策一體化的通用模型)

目前,行業需要真·端到端自動駕駛方案,因為基于規則的智駕方案的天花闆已開始顯現。随着城區成為智駕落地的主戰場,場景計算的複雜度呈指數級增長。大量的人力資源投入也隻是增加有限的規則,無法應對數量無限的複雜場景和長尾路況(corner case)。端到端技術的出現開辟了一條全新的道路,開始推動自動駕駛範式從鋪設大量人力轉變為持續算力投入和高品質資料輸入。

憑借商湯大裝置的豐沛算力、高品質仿真資料和行業領先的模型性能,UniAD端到端方案有更高的能力上限,強大的學習和思考能力讓它能夠像人一樣開車;資料驅動的端到端模型泛化能力強、疊代效率快,可以幫助車企低成本快速開城;純視覺感覺的無圖方案,進一步降低系統的軟硬體成本,助力智駕普及,實作全國都能開。

加速智能汽車駛入AGI時代,商湯絕影系列原生态大模型亮相車展

(新一代自動駕駛大模型DriveAGI:可感覺、可互動、可信賴)

在端到端系統基礎上,商湯絕影還在本次車展期間前瞻介紹了新一代自動駕駛大模型DriveAGI,推動自動駕駛從資料驅動向認知驅動的躍遷。依托多模态大模型強大的世界了解、推理能力、決策能力以及互動能力,DriveAGI将是目前最貼近人類思維模式、最能了解人類意圖并有最強解決駕駛困難場景能力的技術方案,向完全無人駕駛邁出重要一步。

敏銳洞察、深度思考、高效執行“多模态場景大腦”,提供真正懂你的智能座艙

前不久上市的小米SU7将AI大模型帶進座艙,而商湯“日日新”大模型也全面助力小愛同學車載語音場景應用。

4月23日,商湯科技釋出全新更新的“日日新SenseNova 5.0”大模型。6000億參數的“日日新5.0”采用混合專家架構(MOE),具備更強的知識、數學、推理及代碼能力,成為國内首個全面對标甚至超越GPT-4 Turbo的大模型,多模态能力領先GPT-4V。基于端雲結合的架構,商湯端側大模型大幅超越同量級大模型,越級比肩7B、13B大模型,更适合車端部署。

基于多模态大模型、大語言模型、文生圖模型等能力組合,商湯絕影建構了以多模态場景大腦為核心的一系列全景感覺、主動關懷且富有創造力的大模型座艙産品。

商湯絕影正在打造的敏銳洞察、深度思考、高效執行的多模态場景大腦,是助力智能汽車邁向AGI時代的核心産品之一。通過應用場景和使用者需求驅動,多模态場景大腦讓智能汽車可以高效準确地全景感覺和深度了解使用者需求和周圍環境,并以場景大腦為核心打通不同應用,将離散的單點功能聚合在一起,進而為使用者提供更多深度個性化的主動關懷和服務。

加速智能汽車駛入AGI時代,商湯絕影系列原生态大模型亮相車展

(多模态大模型可以準确感覺并識别車外資訊)

基于地理位置推薦符合使用者喜好的餐廳、介紹使用者感興趣的外部自然景物,并進行優質景點推薦是絕影AI大模型座艙産品的基礎功能。憑借強大的多模态感覺能力,搭載商湯絕影方案的車輛能夠準确感覺并識别車外的資訊,包括周圍車輛的車型、标志性建築物等,以語音、圖檔或者視訊等方式為艙内人員提供更為準确和全面的内容,幫助使用者了解和掌握外部環境資訊,打破座艙本身的限制,讓使用者享受更為自由無束縛的出行體驗。

此外,以多模态場景大腦為核心,商湯絕影還能提供更多基于汽車場景的AI大模型座艙産品。以商湯“大醫”醫療健康大模型為橋梁的“旅醫”,讓使用者在座艙内就可以獲得專業及個性化的健康管理服務,讓出行更安心。基于AIGC大模型技術的“神筆”,可以把使用者簡單的繪畫線條轉變成具有美感的藝術作品,增添駕乘樂趣。

加速智能汽車駛入AGI時代,商湯絕影系列原生态大模型亮相車展

(“旅醫”讓使用者在座艙内就可以獲得專業及個性化的健康管理服務)

加速智能汽車駛入AGI時代,商湯絕影系列原生态大模型亮相車展

(“神筆”可以把使用者簡單的繪畫線條轉變成具有美感的藝術作品)

人機互動的創新也是驅動座艙體驗升維的重要因素,去年Apple Vision Pro的問世展現了3D互動的創新體驗和應用潛力。商湯絕影憑借深厚的感覺技術研發實力和高效的創新疊代效率,将3D Gaze高精視線互動和3D 動态手勢互動這兩大全新座艙3D互動示範帶到現場,讓觀衆體驗到更符合人類直覺的艙内互動方式,推動座艙互動向更安全、更便利的3D互動升維進化。

其中, 3D Gaze高精視線互動是商湯絕影全球首創的能夠通過視線定位與螢幕圖示進行互動的智能座艙技術,讓使用者無需點按螢幕,通過眼神即可精準控制中控圖示,完成多種互動操作;3D 動态手勢互動是行業領先的支援動态手勢和手部微動作識别的智能座艙技術,使用者通過手勢“隔空”實作各類座艙精細化的互動,打破傳統按鍵和螢幕觸控方式的繁瑣和局限。

面向未來,商湯絕影還在進一步探索艙駕融合,實作智能駕駛和智能座艙在硬體、軟體及應用層面的全面融合,提升使用者體驗、降低系統成本,進一步打破艙内外的界限和束縛,湧現更多創新功能,帶來更安全、更加全方位,更具人文關懷的新體驗。

率先完成四大技術基座布局,商湯絕影加速智能汽車駛入AGI時代

未來一到兩年,智能汽車處在一個關鍵的時間節點,它與通用人工智能的深度融合将開啟一個全新的時代。沒有公司能在新時代單打獨鬥成功,車企需要強有力的核心技術夥伴攜手共進,而商湯絕影正是行業稀缺的同時具備“算力+算法+量産經驗”全棧技術領先的核心供應商,是一匹應勢而躍的千裡馬,能夠助力合作夥伴在AGI時代持續領先。

AGI的突破掀起技術範式的革新,堅實的核心研發能力成為行業競争的關鍵。依托商湯大裝置深厚的算力儲備、原生的汽車垂類大模型、領先的軟硬體架構和全棧資料生産管線,商湯絕影率先建構了四大技術基座,正在成長為加速智能汽車駛入AGI時代的核心技術夥伴。

SenseCore商湯大裝置是行業領先的AI基礎設施,能夠以高達12,000 petaFLOPS的豐沛算力支援商湯絕影系列原生态大模型的高效疊代;商湯絕影為智能汽車前瞻建構了UniAD、DriveAGI以及面向座艙的多模态場景大腦等系列原生态大模型,加速端到端自動駕駛和大模型在智能座艙場景的落地;端雲協同和艙駕融合的創新軟硬體架構,讓智能汽車降本增效、湧現創新功能;全棧的資料生産管線,實作大模型的高品質訓練。

加速智能汽車駛入AGI時代,商湯絕影系列原生态大模型亮相車展

(商湯大裝置支援商湯絕影系列原生态大模型高效疊代)

憑借四大AGI技術基座,商湯絕影将推動智能汽車加速擁抱通用人工智能時代,以端到端大模型解決智能駕駛規模化普及難題,以多模态場景大腦讓智能座艙告别傳統的單點功能開發模式,驅動行業生産效率革新,并打破艙内外的界限和束縛,驅動人機互動體驗革新,提供靈活自适應、深度個性化、安全可信賴、有人文關懷的未來出行全新體驗。

如今,商湯絕影已經建構了智能駕駛、智能座艙和AI雲的多元AGI産品體系,正在加速推動原生态大模型産品在汽車智能化領域的全方位深度應用,加速AGI融入汽車産業,與廣大車企合作共赢,開啟未來出行的新篇章。

4月25日至5月4日,歡迎莅臨商湯絕影展位(中國國際展覽中心(順義館)E1-W09),共同探索AGI時代的未來出行願景。

繼續閱讀