1月份VR陀螺兩次介紹XR的標(biāo)配技術(shù)眼動(dòng)追蹤 － 《孕育兩家上市公司，20年沉淀的Tobii用眼動(dòng)追蹤撬動(dòng)多個(gè)市場(chǎng)》和《新一代XR頭顯標(biāo)配，詳解眼動(dòng)追蹤技術(shù)的價(jià)值和挑戰(zhàn)》，得到了很多讀者的關(guān)注，也引發(fā)了不少討論。

近日，我們與Tobii副總裁尤浩魁（Johan Hellqvist）進(jìn)行了一次對(duì)話，就大家感興趣的問(wèn)題進(jìn)行了深入探討。

Tobii副總裁尤浩魁

VR陀螺：尤先生，您好！很高興有機(jī)會(huì)和您一起探討 XR 的現(xiàn)狀、元宇宙、以及眼動(dòng)追蹤將如何為其帶來(lái)新體驗(yàn)。

尤浩魁：您好！我也很榮幸有機(jī)會(huì)在中國(guó)農(nóng)歷新年的開(kāi)年之際和您一起探討這個(gè)引人入勝的話題。

VR陀螺：近幾個(gè)月來(lái)，元宇宙變成了一個(gè)炙手可熱的討論話題。您認(rèn)為元宇宙是什么？怎么看這個(gè)概念？

尤浩魁：如大家所知，元宇宙不是一個(gè)新概念。它的出現(xiàn)是因?yàn)槿藗冊(cè)诓粩喟l(fā)展的技術(shù)之間建立了創(chuàng)新的聯(lián)系。它是一個(gè)混合現(xiàn)實(shí) （MR） 空間，人們可以聚在一起工作、娛樂(lè)、協(xié)作，甚至以他們自己或虛擬形象的身份謀生。這是一個(gè)公平的競(jìng)爭(zhēng)環(huán)境，任何人都可以在任何地方從任何設(shè)備進(jìn)入。未來(lái)，技術(shù)平臺(tái)將解決時(shí)間和空間的挑戰(zhàn)，讓用戶在混合現(xiàn)實(shí)中體驗(yàn)到真實(shí)性和連貫性。

今天，大部分對(duì)元宇宙概念的熱捧是因?yàn)?meta（Facebook的前身）、微軟和英偉達(dá)等大型科技公司正在使用元宇宙來(lái)描述一系列技術(shù)的融合。云服務(wù)、廣域網(wǎng)和移動(dòng)網(wǎng)絡(luò)已經(jīng)成熟到可以為運(yùn)營(yíng)商提供可持續(xù)的商業(yè)模式，各類設(shè)備已經(jīng)漸趨成熟并開(kāi)始兌現(xiàn)身臨其境的承諾。不斷縮小的外形尺寸和更低的價(jià)格進(jìn)一步推動(dòng)了XR設(shè)備的運(yùn)用——這為內(nèi)容創(chuàng)造了新的需求，也為開(kāi)發(fā)人員提供了不斷擴(kuò)大的市場(chǎng)。當(dāng)你將所有這些聯(lián)系起來(lái)時(shí)，你就會(huì)得到元宇宙和它所承諾的東西。

VR陀螺：元宇宙與眼動(dòng)追蹤以及Tobii 有什么關(guān)系？

尤浩魁：隨著元宇宙的發(fā)展，我們將看到 VR 和 AR 可穿戴設(shè)備的普及，因?yàn)樗鼈儗⑻峁└鄤?chuàng)新的沉浸體驗(yàn)。Tobii 的技術(shù)將實(shí)現(xiàn)在元宇宙中本無(wú)法實(shí)現(xiàn)的真實(shí)連接，因?yàn)槲覀兡芴峁┍普娴难凵窠涣骱蛯?duì)人類注意力的理解——這些都是溝通的核心要素。

從很小的時(shí)候起，孩子們就學(xué)會(huì)了遵循視覺(jué)線索來(lái)理解世界。當(dāng)你看著一個(gè)人的眼睛或觀察他們的嘴唇如何移動(dòng)時(shí)，意圖解釋的差異是巨大的。所以，只有在XR設(shè)備配備了眼動(dòng)追蹤功能時(shí)，才能在虛擬和真實(shí)世界之間的溝通中有效地表達(dá)真實(shí)意圖。

再比如鍵盤或鼠標(biāo)之類的控制設(shè)備，它們?cè)疽膊荒敲粗庇^，但后來(lái)我們逐漸接受了這些信息輸入方式。但在元宇宙中（尤其是AR環(huán)境下），我想用戶們大概不想以尷尬的方式揮動(dòng)我們的手或控制設(shè)備。

現(xiàn)實(shí)生活中，我們使用手勢(shì)、語(yǔ)言和眼神交流來(lái)表達(dá)意圖，元宇宙中的體驗(yàn)也應(yīng)如此。捕捉注視點(diǎn)、頭部運(yùn)動(dòng)和面部特征的眼動(dòng)追蹤將實(shí)現(xiàn)快速身份驗(yàn)證，并利用頭部姿勢(shì)和視覺(jué)線索進(jìn)行直觀交流。眼動(dòng)追蹤還將支持簡(jiǎn)單、直觀的手勢(shì)使用，代替手指指向及其他復(fù)雜且需謹(jǐn)慎操控的手勢(shì)使用場(chǎng)合。

對(duì)于使用增強(qiáng)現(xiàn)實(shí)設(shè)備進(jìn)入虛擬世界的人來(lái)說(shuō)，眼動(dòng)追蹤至關(guān)重要。我們的技術(shù)提供的信息將幫助開(kāi)發(fā)人員將虛擬對(duì)象無(wú)縫地編織到物理世界中。因此，眼動(dòng)追蹤將有助于減少真實(shí)世界和虛擬世界之間的視差，讓用戶感覺(jué)真實(shí)和連貫，得到愉快的體驗(yàn)。另外，眼動(dòng)追蹤技術(shù)也是開(kāi)發(fā)多焦點(diǎn)顯示器和自動(dòng)調(diào)節(jié)系統(tǒng)的基礎(chǔ)。

圖源：Tobii

VR陀螺：XR 設(shè)備是元宇宙的入口，它們需要能為用戶提供沉浸感和真實(shí)參與感。為此，提高設(shè)備體驗(yàn)的舒適度成為一個(gè)重要目標(biāo)。在這個(gè)方面，眼動(dòng)追蹤能起到什么樣的作用？

尤浩魁：XR設(shè)備可以通過(guò) Tobii 眼動(dòng)追蹤提高用戶的舒適度，這是因?yàn)轭^顯設(shè)備可以利用瞳距測(cè)量來(lái)匹配不同生理特征的用戶，使絕大多數(shù)用戶獲得一致的高質(zhì)量的用戶體驗(yàn)，同時(shí)還能對(duì)頭顯佩戴進(jìn)行自動(dòng)調(diào)整，而不影響用戶體驗(yàn)。

用戶還可能會(huì)遇到暈動(dòng)（motion sickness）的問(wèn)題，而高分辨率圖形可以幫助解決這個(gè)問(wèn)題。這就是動(dòng)態(tài)注視點(diǎn)渲染等技術(shù)對(duì)XR 設(shè)備在拆分式或本機(jī)式處理架構(gòu)中運(yùn)行中所起到的重要作用。

2021年，我們和英偉達(dá)一起發(fā)布了基于Tobii Spotlight的新一版可變速率超級(jí)采樣 VRSS 2技術(shù)。這兩種技術(shù)協(xié)作以最小延遲向驅(qū)動(dòng)程序提供注視信息，使開(kāi)發(fā)人員能夠創(chuàng)建從動(dòng)態(tài)注視點(diǎn)渲染中獲益的應(yīng)用程序，而無(wú)需寫一行代碼。由此產(chǎn)生的穩(wěn)定高幀率有助于降低部分用戶在使用 VR 時(shí)遇到的眩暈閾值。

VRChat中同一場(chǎng)景比較顯示，啟動(dòng)基于Tobii眼動(dòng)追蹤的Nvidia VRSS2可以得到更加清晰的圖像畫面。上圖為未開(kāi)啟注視點(diǎn)渲染，下圖為開(kāi)啟狀態(tài)（圖源：Tobii）

VR陀螺：從硬件角度來(lái)看XR有哪些新技術(shù)趨勢(shì)？Tobii 是否可以確保解決方案和集成平臺(tái)適應(yīng)這些新趨勢(shì)？

尤浩魁：圖像質(zhì)量和設(shè)備重量歷來(lái)影響著可穿戴設(shè)備的使用體驗(yàn)，這推動(dòng)了折疊光學(xué)器件（在 XR 中通常被稱為pancake透鏡）的開(kāi)發(fā)和采用，比傳統(tǒng)的菲涅爾透鏡設(shè)計(jì)更能得到重量更輕、體積更小的頭顯設(shè)備。

在XR OEM逐漸采用折疊光學(xué)設(shè)計(jì)的轉(zhuǎn)變中，Tobii XR已做了充分的支持準(zhǔn)備。比如我們2021 年的大部分研發(fā)工作都集中于開(kāi)發(fā)新一代的集成平臺(tái)，以便為這種新興架構(gòu)提供最優(yōu)解決方案。Tobii新一代的方案設(shè)計(jì)緊湊，無(wú)需對(duì)頭顯進(jìn)行侵入性更改即可實(shí)現(xiàn)集成，能最大限度地減少能耗。

另一個(gè)重要趨勢(shì)式是主要的硬件開(kāi)發(fā)商在消費(fèi)級(jí)XR設(shè)備中采用了眼動(dòng)追蹤。去年，有兩個(gè)主流XR頭顯設(shè)備原生整合了我們的解決方案：Pico Neo 3 Pro Eye 和 HP Reverb G2 Omnicept Edition。Pico 的成功表明了市場(chǎng)對(duì)一體式設(shè)備的需求，而惠普的成功則表明了市場(chǎng)對(duì)多種傳感器的需求。另外，Pimax也宣布了與Tobii的合作伙伴關(guān)系，要把元宇宙的全部潛力帶給消費(fèi)者。

對(duì)于消費(fèi)設(shè)備的XR OEM來(lái)說(shuō)，Tobii解決方案的一個(gè)關(guān)鍵差異化因素是，Tobii的整合平臺(tái)廣泛適配絕大多數(shù)光學(xué)方案，眼動(dòng)追蹤技術(shù)在高度覆蓋使用人群時(shí)，仍可獲得領(lǐng)先于所有其他技術(shù)提供商的高精確度和準(zhǔn)確度性能表現(xiàn)。

VR陀螺：在消費(fèi)級(jí)XR 設(shè)備中應(yīng)用眼動(dòng)追蹤技術(shù)時(shí)，您認(rèn)為最大的挑戰(zhàn)是什么？

尤浩魁：正如之前提到過(guò)的，Tobii的技術(shù)目標(biāo)是要適用于任何人、任何地方和任何設(shè)備（“三任何原則”），開(kāi)發(fā)一種在受控環(huán)境中工作的眼動(dòng)追蹤系統(tǒng)是相對(duì)容易的，但要符合“三任何原則”卻著實(shí)不易。Tobii經(jīng)過(guò)二十多年的不懈努力，已經(jīng)能夠提供適合不同眼睛形狀、顏色、視網(wǎng)膜反射率、以及視力矯正等問(wèn)題的解決方案。對(duì)于消費(fèi)級(jí)設(shè)備而言，我們的目標(biāo)不僅僅是要達(dá)到 95％以上的用戶覆蓋率，更是要能提供在量產(chǎn)設(shè)備中可復(fù)現(xiàn)的強(qiáng)大解決方案。

VR陀螺：您認(rèn)為哪些眼動(dòng)追蹤應(yīng)用領(lǐng)域會(huì)首先進(jìn)入元宇宙？

尤浩魁：醫(yī)療保健、遠(yuǎn)程協(xié)作、游戲、社交、教育和基于模擬的培訓(xùn)等有可能是探索元宇宙的先行者，其中我們已經(jīng)看到醫(yī)療保健成為企業(yè)應(yīng)用領(lǐng)域的領(lǐng)跑者。我之所以這么說(shuō)，是因?yàn)樵?021年我們看到了市場(chǎng)對(duì) Tobii Ocumen 的巨大興趣——這是一款用于數(shù)據(jù)記錄、組織和高級(jí)分析應(yīng)用程序以揭示人類行為的分析工具包產(chǎn)品。

在消費(fèi)領(lǐng)域，鑒于當(dāng)前的用戶興趣和平臺(tái)發(fā)展方式，社交應(yīng)用和游戲?qū)⒔?jīng)歷高速增長(zhǎng)。我認(rèn)為這些是消費(fèi)者最期待的元宇宙體驗(yàn)領(lǐng)域。對(duì)于 Tobii，這意味著我們將繼續(xù)與XR OEM、開(kāi)發(fā)者和內(nèi)容創(chuàng)作者密切合作，將真實(shí)的社交存在、逼真的虛擬形象、直觀的界面和用于身份驗(yàn)證的生物識(shí)別等功能帶入未來(lái)元宇宙。

SyncThink的EYE－SYNC 產(chǎn)品系列采用整合了Tobii眼動(dòng)追蹤的Pico Neo設(shè)備以及Tobii Ocumen（圖源：網(wǎng)絡(luò)）

VR陀螺：應(yīng)用開(kāi)發(fā)確實(shí)是元宇宙里極其重要的一環(huán)，您可以談一下行業(yè)標(biāo)準(zhǔn)和 OpenXR 的重要性嗎？

尤浩魁：促進(jìn)跨平臺(tái)發(fā)展最有效方法之一是開(kāi)放標(biāo)準(zhǔn)，因?yàn)樗鼈冇兄诜乐构?yīng)商鎖定以及耗時(shí)耗力的設(shè)備調(diào)整。它還能允許大型科技企業(yè)和小眾運(yùn)營(yíng)商一起工作。我們知道，OpenXR 早在 2020 年就發(fā)布了眼動(dòng)追蹤標(biāo)準(zhǔn)擴(kuò)展，我們今年可以期待的是該標(biāo)準(zhǔn)在商用設(shè)備和 Microsoft Windows MR 平臺(tái)等支持類解決方案中的實(shí)施。Tobii是OpenXR工作組的主要成員，我們一直在推動(dòng)OpenXR中眼動(dòng)追蹤技術(shù)的標(biāo)準(zhǔn)設(shè)立和跨平臺(tái)推廣。

VR陀螺：新年伊始，您覺(jué)得我們?cè)?2022 年可以期待些什么？Tobii 將如何為元宇宙用戶體驗(yàn)增加價(jià)值？

尤浩魁：對(duì)我來(lái)說(shuō)，我期待每臺(tái)XR頭顯設(shè)備中都整合眼動(dòng)追蹤技術(shù)，這將需要像我們這樣的集成技術(shù)，來(lái)實(shí)現(xiàn)任何人、任何地方和任何設(shè)備都可以獲得的高品質(zhì)元宇宙體驗(yàn)的目標(biāo)。

我們將看到設(shè)備類型繼續(xù)呈多樣化發(fā)展，但主要趨勢(shì)將會(huì)體現(xiàn)在輕量級(jí)的一體式頭顯設(shè)備上。對(duì)于開(kāi)發(fā)人員來(lái)說(shuō)，元宇宙為商業(yè)敘事和創(chuàng)新應(yīng)用的開(kāi)發(fā)提供了一個(gè)堅(jiān)實(shí)的平臺(tái)。

我們可以期待看到一些早期的專業(yè)級(jí)消費(fèi)者（prosumer），但與大多數(shù)新興解決方案一樣，最初的體驗(yàn)可能會(huì)有些零散。我們還將看到會(huì)有越來(lái)越多的協(xié)作應(yīng)用程序來(lái)幫助企業(yè)突破組織界限，消除由時(shí)空限制造成的孤島效應(yīng)。

消費(fèi)端來(lái)說(shuō)，我們將在2022年看到更多消費(fèi)級(jí)XR設(shè)備整合Tobii眼動(dòng)追蹤技術(shù)，讓硬件性能更加出色，讓用戶擁有更為真實(shí)的虛擬化身、更逼真的目光接觸和交流、更易于使用的界面和創(chuàng)新的游戲玩法。

       原文標(biāo)題 : 對(duì)話Tobii副總裁：眼動(dòng)追蹤是創(chuàng)建元宇宙不可或缺的一環(huán)