近日， GSXR重要成員NOLO在其自媒體賬号釋出了其關于手勢識别技術的示範片段。從視訊内容可以看出，從業人員佩戴NOLO即将發售的裝置NOLO SONIC 2，裸手流暢的進行點、按、捏、拖拽、滑動等動作。NOLO官方表示該項技術不僅搭載于NOLO SONIC 2裝置，還将對外開發合作。憑借更加自然和直覺的操作方式，NOLO的手勢識别技術将作為GSXR标準下互動輸入的技術方案的新範式補充。
2021年3月，由中國移動牽頭，聯合産業夥伴發起的中國XR通用标準（GSXR）正式對外釋出，并在CCSA擴充現實産業及标準推進委員會引領下在産業中快速推廣，該标準旨在建構起中國的XR跨平台互通體系，使得行業參與者基于該标準開展硬體、平台、内容開發，即可確定所開發的軟體應用均可運作在針對該标準做過适配的硬體上。此标準的正式施行極大的降低了XR軟硬體适配難度，加速推動了行業發展。
GSXR标準的正式實施，不僅為XR行業提供了通用接口規範，降低了開發者接入成本；同時将軟體功能內建SDK的形式，服務于XR行業。
騰訊搜狗輸入法正是通過此種路徑成為GSXR标準内首個‘中文輸入’解決方案，也是标準内重要的人機互動解決方案之一。騰訊搜狗輸入法為XR系統提供專屬、智能和高效的語音輸入和鍵盤輸入模式，還能能根據系統輸入框類型比對多形态鍵盤。其中行業首創的語音輸入，讓使用者解放雙手，動動嘴就能打字；搜狗通過軟硬體結合的方式進行創新，優化搖桿輸入體驗，提升輸入效率；結合手勢算法能力，還可進行裸手輸入，讓使用者體驗到更沉浸，更智能的輸入方式。當下搜狗VR輸入法已服務于中國XR行業的硬體産品，并在中國移動 x NOLO聯合品牌VR終端中作為首個基線産品實作應用落地。
NOLO釋出的手勢追蹤技術同樣基于GSXR标準協定研發，開發者可以通過GSXR的通用API接口，使用XR特性子產品中的手勢識别、骨骼節點、捏合姿态、手部追蹤等功能用于XR應用開發。同時，為了友善開發者快速上手開發XR應用，GSXR提供了Unreal SDK、Unity SDK詳細的說明文檔以及論壇讨論功能。對接完畢後，使用者可在XR裝置内實作裸手進行點、按、選擇、拖拽等更加自然和沉浸的操作。
提及該項技術的研發過程，NOLO相關技術負責人表示：“NOLO技術團隊憑借人工智能的深度學習技術，借助真實手部圖像和3D生成手部圖像進行資料融合訓練。用數百萬張手部圖像訓練了一個專門的深度神經網絡，其中手腕和手指擁有3D空間位姿；由此生成的手勢資料通過GSXR協定傳輸到3D圖形引擎渲染，再顯示到VR眼鏡中，最終達成了現實世界和VR世界的手勢同步。同時為了保證識别的實時性，NOLO深度優化網絡結構，保障在骁龍XR2晶片上單幀識别速度達到5ms以下；深度學習算法通過動态提取多幀資料中的手勢資訊，提高動作連貫性，以此達到流暢絲滑的識别效果。”
對于該項技術是否對外開放，NOLO相關負責人表示：“該項手勢追蹤技術除了用于NOLO SONIC 2，以不斷豐富使用者的體驗感受。作為GSXR工作組的一員，我們持開放的态度，将此技術合作開放給CCSA擴充現實産業及标準推進委員會的成員，助力中國XR産業的快速發展。”
GSXR标準已執行2年，CCSA擴充現實産業及标準推進委員會将進一步推動擴充現實标準實施與落地，研發适合産業發展的測試解決方案，開展産品的測試認證，探索新應用模式，服務應用開發者，建設健康可持續的産業生态。接下來，中國移動（終端公司及咪咕文化）将依托GSXR統一标準，彙聚全領域内容，提供“标準-内容（應用）-平台”的一站式服務，打造“一個平台、N個内容資源、N個應用服務”的“1+N+N”服務體系，對外開放XR通用能力，提供端到端的解決方案。從标準、内容、終端等多方面，建構全領域XR矩陣，将XR技術賦能應用在教育、醫療、工業、體育、演藝等多個領域與場景。并以開放的态度，與産業夥伴一道共同建設健康的XR大生态，助力中國XR産業快速發展。