1月份VR陀螺兩次介紹XR的标配技術眼動追蹤 - 《孕育兩家上市公司，20年沉澱的Tobii用眼動追蹤撬動多個市場》和《新一代XR頭顯标配，詳解眼動追蹤技術的價值和挑戰》，得到了很多讀者的關注，也引發了不少讨論。
近日，我們與Tobii副總裁尤浩魁（Johan Hellqvist）進行了一次對話，就大家感興趣的問題進行了深入探讨。
Tobii副總裁尤浩魁
VR陀螺：尤先生，您好！很高興有機會和您一起探讨 XR 的現狀、元宇宙、以及眼動追蹤将如何為其帶來新體驗。
尤浩魁：您好！我也很榮幸有機會在中國農曆新年的開年之際和您一起探讨這個引人入勝的話題。
VR陀螺：近幾個月來，元宇宙變成了一個炙手可熱的讨論話題。您認為元宇宙是什麼？怎麼看這個概念？
尤浩魁：如大家所知，元宇宙不是一個新概念。它的出現是因為人們在不斷發展的技術之間建立了創新的聯系。它是一個混合現實 (MR) 空間，人們可以聚在一起工作、娛樂、協作，甚至以他們自己或虛拟形象的身份謀生。這是一個公平的競争環境，任何人都可以在任何地方從任何裝置進入。未來，技術平台将解決時間和空間的挑戰，讓使用者在混合現實中體驗到真實性和連貫性。
今天，大部分對元宇宙概念的熱捧是因為 Meta（Facebook的前身）、微軟和英偉達等大型科技公司正在使用元宇宙來描述一系列技術的融合。雲服務、廣域網和移動網絡已經成熟到可以為營運商提供可持續的商業模式，各類裝置已經漸趨成熟并開始兌現身臨其境的承諾。不斷縮小的外形尺寸和更低的價格進一步推動了XR裝置的運用——這為内容創造了新的需求，也為開發人員提供了不斷擴大的市場。當你将所有這些聯系起來時，你就會得到元宇宙和它所承諾的東西。
圖源：網絡
VR陀螺：元宇宙與眼動追蹤以及Tobii 有什麼關系？
尤浩魁：随着元宇宙的發展，我們将看到 VR 和 AR 可穿戴裝置的普及，因為它們将提供更多創新的沉浸體驗。Tobii 的技術将實作在元宇宙中本無法實作的真實連接配接，因為我們能提供逼真的眼神交流和對人類注意力的了解——這些都是溝通的核心要素。
從很小的時候起，孩子們就學會了遵循視覺線索來了解世界。當你看着一個人的眼睛或觀察他們的嘴唇如何移動時，意圖解釋的差異是巨大的。是以，隻有在XR裝置配備了眼動追蹤功能時，才能在虛拟和真實世界之間的溝通中有效地表達真實意圖。
再比如鍵盤或滑鼠之類的控制裝置，它們原本也不那麼直覺，但後來我們逐漸接受了這些資訊輸入方式。但在元宇宙中（尤其是AR環境下），我想使用者們大概不想以尴尬的方式揮動我們的手或控制裝置。
現實生活中，我們使用手勢、語言和眼神交流來表達意圖，元宇宙中的體驗也應如此。捕捉注視點、頭部運動和面部特征的眼動追蹤将實作快速身份驗證，并利用頭部姿勢和視覺線索進行直覺交流。眼動追蹤還将支援簡單、直覺的手勢使用，代替手指指向及其他複雜且需謹慎操控的手勢使用場合。
對于使用增強現實裝置進入虛拟世界的人來說，眼動追蹤至關重要。我們的技術提供的資訊将幫助開發人員将虛拟對象無縫地編織到實體世界中。是以，眼動追蹤将有助于減少真實世界和虛拟世界之間的視差，讓使用者感覺真實和連貫，得到愉快的體驗。另外，眼動追蹤技術也是開發多焦點顯示器和自動調節系統的基礎。
VR陀螺：XR 裝置是元宇宙的入口，它們需要能為使用者提供沉浸感和真實參與感。為此，提高裝置體驗的舒适度成為一個重要目标。在這個方面，眼動追蹤能起到什麼樣的作用？
尤浩魁：XR裝置可以通過 Tobii 眼動追蹤提高使用者的舒适度，這是因為頭顯裝置可以利用瞳距測量來比對不同生理特征的使用者，使絕大多數使用者獲得一緻的高品質的使用者體驗，同時還能對頭顯佩戴進行自動調整，而不影響使用者體驗。
使用者還可能會遇到暈動（motion sickness）的問題，而高分辨率圖形可以幫助解決這個問題。這就是動态注視點渲染等技術對XR 裝置在拆分式或本機式處理架構中運作中所起到的重要作用。
2021年，我們和英偉達一起釋出了基于Tobii Spotlight的新一版可變速率超級采樣 VRSS 2技術。這兩種技術協作以最小延遲向驅動程式提供注視資訊，使開發人員能夠建立從動态注視點渲染中獲益的應用程式，而無需寫一行代碼。由此産生的穩定高幀率有助于降低部分使用者在使用 VR 時遇到的眩暈門檻值。
（圖源：Tobii）
VRChat中同一場景比較顯示，啟動基于Tobii眼動追蹤的Nvidia VRSS2可以得到更加清晰的圖像畫面。上圖為未開啟注視點渲染，下圖為開啟狀态
VR陀螺：從硬體角度來看XR有哪些新技術趨勢？Tobii 是否可以確定解決方案和內建平台适應這些新趨勢？
尤浩魁：圖像品質和裝置重量曆來影響着可穿戴裝置的使用體驗，這推動了折疊光學器件（在 XR 中通常被稱為pancake透鏡）的開發和采用，比傳統的菲涅爾透鏡設計更能得到重量更輕、體積更小的頭顯裝置。
在XR OEM逐漸采用折疊光學設計的轉變中，Tobii XR已做了充分的支援準備。比如我們2021 年的大部分研發工作都集中于開發新一代的內建平台，以便為這種新興架構提供最優解決方案。Tobii新一代的方案設計緊湊，無需對頭顯進行侵入性更改即可實作內建，能最大限度地減少能耗。
另一個重要趨勢式是主要的硬體開發商在消費級XR裝置中采用了眼動追蹤。去年，有兩個主流XR頭顯裝置原生整合了我們的解決方案：Pico Neo 3 Pro Eye 和 HP Reverb G2 Omnicept Edition。Pico 的成功表明了市場對一體式裝置的需求，而惠普的成功則表明了市場對多種傳感器的需求。另外，Pimax也宣布了與Tobii的合作夥伴關系，要把元宇宙的全部潛力帶給消費者。
對于消費裝置的XR OEM來說，Tobii解決方案的一個關鍵差異化因素是，Tobii的整合平台廣泛适配絕大多數光學方案，眼動追蹤技術在高度覆寫使用人群時，仍可獲得領先于所有其他技術提供商的高精确度和準确度性能表現。
VR陀螺：在消費級XR 裝置中應用眼動追蹤技術時，您認為最大的挑戰是什麼？
尤浩魁：正如之前提到過的，Tobii的技術目标是要适用于任何人、任何地方和任何裝置（“三任何原則”），開發一種在受控環境中工作的眼動追蹤系統是相對容易的，但要符合“三任何原則”卻着實不易。Tobii經過二十多年的不懈努力，已經能夠提供适合不同眼睛形狀、顔色、視網膜反射率、以及視力矯正等問題的解決方案。對于消費級裝置而言，我們的目标不僅僅是要達到 95%以上的使用者覆寫率，更是要能提供在量産裝置中可複現的強大解決方案。
VR陀螺：您認為哪些眼動追蹤應用領域會首先進入元宇宙？
尤浩魁：醫療保健、遠端協作、遊戲、社交、教育和基于模拟的教育訓練等有可能是探索元宇宙的先行者，其中我們已經看到醫療保健成為企業應用領域的領跑者。我之是以這麼說，是因為在2021年我們看到了市場對 Tobii Ocumen 的巨大興趣——這是一款用于資料記錄、組織和進階分析應用程式以揭示人類行為的分析工具包産品。
在消費領域，鑒于目前的使用者興趣和平台發展方式，社交應用和遊戲将經曆高速增長。我認為這些是消費者最期待的元宇宙體驗領域。對于 Tobii，這意味着我們将繼續與XR OEM、開發者和内容創作者密切合作，将真實的社交存在、逼真的虛拟形象、直覺的界面和用于身份驗證的生物識别等功能帶入未來元宇宙。
（圖源：網絡）
SyncThink的EYE-SYNC 産品系列采用整合了Tobii眼動追蹤的Pico Neo裝置以及Tobii Ocumen
VR陀螺：應用開發确實是元宇宙裡極其重要的一環，您可以談一下行業标準和 OpenXR 的重要性嗎？
尤浩魁：促進跨平台發展最有效方法之一是開放标準，因為它們有助于防止供應商鎖定以及耗時耗力的裝置調整。它還能允許大型科技企業和小衆營運商一起工作。我們知道，OpenXR 早在 2020 年就釋出了眼動追蹤标準擴充，我們今年可以期待的是該标準在商用裝置和 Microsoft Windows MR 平台等支援類解決方案中的實施。Tobii是OpenXR工作組的主要成員，我們一直在推動OpenXR中眼動追蹤技術的标準設立和跨平台推廣。
VR陀螺：新年伊始，您覺得我們在 2022 年可以期待些什麼？Tobii 将如何為元宇宙使用者體驗增加價值？
尤浩魁：對我來說，我期待每台XR頭顯裝置中都整合眼動追蹤技術，這将需要像我們這樣的內建技術，來實作任何人、任何地方和任何裝置都可以獲得的高品質元宇宙體驗的目标。
我們将看到裝置類型繼續呈多樣化發展，但主要趨勢将會展現在輕量級的一體式頭顯裝置上。對于開發人員來說，元宇宙為商業叙事和創新應用的開發提供了一個堅實的平台。
我們可以期待看到一些早期的專業級消費者（prosumer)，但與大多數新興解決方案一樣，最初的體驗可能會有些零散。我們還将看到會有越來越多的協作應用程式來幫助企業突破組織界限，消除由時空限制造成的孤島效應。
消費端來說，我們将在2022年看到更多消費級XR裝置整合Tobii眼動追蹤技術，讓硬體性能更加出色，讓使用者擁有更為真實的虛拟化身、更逼真的目光接觸和交流、更易于使用的界面和創新的遊戲玩法。