天天看點

元宇宙時代,缺這樣一顆「專用」晶片

機器之心釋出

機器之心編輯部

AR 行業是否到了需要一顆專用晶片的拐點?近期,Rokid 與安謀科技聯合造芯的消息,把這一話題抛到了行業聚光燈下。

引言

2017 年,就在蘋果憑借 iPhone 和 Apple Watch 中的自研晶片斬獲成功果實時,其 Mac 産品卻在性能優化更新過程中遇到瓶頸。

自加入蘋果後,晶片工程師斯魯吉就一直緻力于根據蘋果裝置的特定需求設計晶片,而不是使用滿足通用要求的晶片。

當時,斯魯吉啟動了一項風險很大的項目:用自研的 M1 晶片取代蘋果筆記本電腦和桌上型電腦 15 年來使用的英特爾處理器。

這一震驚 PC 行業的決定不僅使蘋果跟其他競争對手拉開巨大的領先優勢,也為其進軍汽車、VR 等潛在未來産品打下基礎。

AR 行業即将開啟專用晶片之路,是否會延續當年蘋果的破局神話?

移動時代的通用晶片

無法撐起 AR 眼鏡的未來

從手機的平面互動到 VR 的虛拟現實互動,再到 AR 的虛實融合互動,每一級的晶片算力需求都是指數級增長。

Meta 的 Oculus 主打 VR 場景,對晶片算力要求比手機高得多,但 VR 裝置體積相對 AR 更大,對晶片功耗、體積的需求并不迫切。

微軟的 Hololens 主打特定 AR 場景的使用,而不是日常佩戴,是以理論上隻要在頭部承重範圍内,可以不斷增加晶片以滿足其功能需求。即使如此,在三代産品上,Hololens 也已牽手三星開始定制晶片。

2012 年采用棱鏡方案的 Google Glass 曾做到 50g 的輕量級,但資訊顯示受限,螢幕成像效果不理想,也無法滿足 C 端多樣化的場景需求。

元宇宙時代,缺這樣一顆「專用」晶片

Rokid Air AR 眼鏡。

2021 年,Rokid 推出了自重為 83g 的 AR 眼鏡 Rokid Air,在輕量級上帶領行業跨進了一大步。但距離一副日常佩戴的眼鏡重量還有提升空間。

元宇宙時代,缺這樣一顆「專用」晶片

目前市面上 AR 眼鏡的主流晶片方案;目前普遍的 “晶片拼搭模式” 不僅帶來更大的 PCB 面積,還造成更高的功耗,更大的佩戴尺寸。

媲美一副墨鏡的重量,提供極緻的互動體驗,以滿足日常佩戴需求,相信這是 AR 眼鏡未來的進化方向。但很明顯,目前的通用型晶片在處理能力、功耗和性能上已滿足不了未來便攜型 AR 眼鏡的發展需求。

PC 和移動時代的晶片已無法撐起面向未來的 AR 眼鏡。

元宇宙時代,缺這樣一顆「專用」晶片

據調研機構預測,2025 年 AR 眼鏡産品出貨量将出現新高點。

面向未來 AR 眼鏡的

全新異構晶片設計方案

随着元宇宙盛行,安謀科技作為中國最大的晶片設計 IP 開發和服務供應商之一,涉足元宇宙晶片并不意外。

元宇宙時代,缺這樣一顆「專用」晶片

據悉,Rokid 攜手安謀科技要研發的專用晶片将采用高內建度、小封裝、低功耗、低延遲、高性能的異構設計方案,提升影像和傳感器資料品質,實作更好的 AR 體驗。預期這顆 AR 晶片整體功耗在幾百毫瓦,同時尺寸做到小拇指甲蓋大小。

Rokid 将在 OS(YodaOS-XR)和算法引擎(SLAM、手勢、數字人等)層面賦能,為面向未來的真正輕量、可以舒适佩戴的增強現實 AR 眼鏡産品下注。

元宇宙時代,缺這樣一顆「專用」晶片

值得注意的是,這顆定制 AR 晶片不僅僅是把幾個小晶片進行簡單內建,而是通過晶片 pipeline 的低延遲設計,加速資料的讀取、傳輸和處理,把所有資料快速傳輸到 Rokid Station 或手機上完成計算,以保證更好的實時性,比如 SLAM 要求更低的 MTP (motion to photon) 延遲。

元宇宙時代,缺這樣一顆「專用」晶片

勇闖 AR 造 “芯” 無人區

Rokid 底氣何在?

“首先和最重要的是,如果我們這樣做,我們能提供更好的産品嗎?” 斯魯吉在談到蘋果要造 M1 晶片的這場辯論時說,“這是首要問題。這和晶片無關。蘋果不是一家晶片公司。”

相對于跨界進入晶片領域的廠商,AR 眼鏡廠商公司推出自己的晶片則是一件更自然的事情。

小編注意到,早在 2018 年 Rokid 就釋出了自研 AI 晶片 KAMINO18,這款晶片模組和 1 元硬币大小接近。當時通用的晶片都是用 CPU 做運算,但 Rokid 創造性選擇用異構的方式來提升性能。

Rokid CEO Misa 在當時透露:“Rokid 不通過晶片賺錢,Rokid 也不是以做晶片為出發點的,因為對我們來講,行業的人都知道晶片的利潤特别低,隻是因為市面上沒有我們需要的,是以我們來做,如果市面上有我就用它。Rokid 不是一家晶片公司,而是人機互動技術公司,未來 Rokid 的晶片還會加入機器視覺方面的能力。”

元宇宙時代,缺這樣一顆「專用」晶片

2018 年,Rokid 選擇內建 DSP 的 AI 晶片,在處理語音算法時實作數量級的提升;定制 NPU 完成深度學習、神經網絡的算法,比單純用 CPU 來計算效率提高 30~50 倍。

時隔 4 年,這家還在成長中的創業公司要再一次在人機互動産品上創造 AR 晶片神話。

在 “拿來主義” 的捷徑面前,Rokid 憑什麼敢走自研晶片這條 “艱難且險峻之路”?

一是源于其産品疊代和場景落地的成熟經驗。2021 年是元宇宙元年,但在 AR 細分領域,Rokid 已深耕了至少 5 年,擁有從硬體到軟體,從技術底層到應用場景全覆寫的完備解決方案。

元宇宙時代,缺這樣一顆「專用」晶片

2017 年,Rokid 就已研制出 AR 眼鏡原型機。

截止目前,Rokid 已有四款 AR 裝置實作量産及規模化應用:紅外測溫眼鏡 Rokid Glass、分體式陣列光波導 AR 眼鏡 Rokid Glass 2、一體式工業 AR 頭環 Rokid X-Craft、以及消費級 AR 眼鏡 Rokid Air。囊括從單目到雙目、從一體到分體、從工業級到消費級等多種裝置形态,覆寫油氣、電力、汽車、防疫、文旅展陳、零售、個體消費者等豐富場景。

這些經驗的積累使得 Rokid 對 AR 産品的市場需求與發展趨勢的研判都更為精準,能夠為晶片設計提供更合理的方案。

元宇宙時代,缺這樣一顆「專用」晶片

二是 “自研晶片 + 自主 OS” 的緊耦合。晶片不能孤立進化,軟硬一體的高度協同才能夠使計算性能最大化。在此之前,Rokid 已自主開發了一套面向 AR 眼鏡的作業系統 YodaOS-XR。

這是一個支援多模态互動、跨平台的作業系統。對 Rokid 來說,自己的晶片搭載自己的 OS 及軟體生态,系統和算法的性能将發揮到最優,AR 眼鏡的功耗與互動的延遲度能夠進一步降低,帶來更極緻使用者體驗的同時,産品創新的自主權和想象空間也會無限大。

元宇宙時代,缺這樣一顆「專用」晶片

築牢未來競争壁壘

補齊生态最後一塊拼圖

從 2020 年開始,全球深陷 “缺芯潮” 危機,中國科技企業意識到在尖端且核心科技領域被 “卡脖子” 的滋味并不好受,車企、手機廠商、網際網路大廠接二連三紮進 “造芯” 賽道。

方興未艾的 AR 行業頭上,也高懸着一把 “達摩克利斯之劍”。

站在元宇宙的視窗,Rokid 搶先踏上 AR 造芯的拓荒之路,用 “自研晶片 + OS” 打造産品護城河。一硬一軟的自主研發,成為掌握科技競争主動權的核心倚仗。

當然,目前 XR 領域的競争将愈演愈烈,網際網路和手機巨頭們雖未正式入局,但不排除全面入局的可能性。

Rokid 作為行業先行者,并沒有逃避這個問題,而是早早在 “生态版圖” 上布下先手棋。

這款自研晶片在 Rokid 的版圖中,可能意味着生态鍊的最後一環,也是最關鍵一環。至此,Rokid 将形成 “晶片 + 作業系統 + 算法引擎 + 平台 + 硬體” 的完整生态,進一步築牢産品競争壁壘。

站在行業角度,這顆晶片作為 AR 造芯的開端,将為後續 AR 晶片的疊代與更新積澱下寶貴經驗。Rokid 對 AR 産品、技術、使用者、市場的了解以及對整個行業和生态的了解也将通過這顆晶片的落地輸送給合作夥伴。

随着 Rokid 與安謀科技的 “芯” 動作,元宇宙行業是否将站上加速期?我們拭目以待。