眼球追蹤在5G+XR場景中的新趨勢:七鑫易維XR業務部總經理路偉成

眼球追蹤在5G+XR場景中的新趨勢:七鑫易維XR業務部總經理路偉成

在春意盎然的4月,我來到七鑫易維在北京的新辦公室,採訪了七鑫易維XR業務部總經理路偉成。作為國內眼球追蹤技術的領軍企業,七鑫易維不僅在今年CES期間亮相了多款VR/AR眼球追蹤集成與配件解決方案,而且還攜手HTC、NVIDIA共同發起了“Droolon杯”眼球追蹤VR內容開發大賽。通過此次交流,我瞭解到了本次大賽的來龍去脈,同時也對眼球追蹤技術在5G時代呈現出的一些新趨勢有了更深的理解。

面向全球開發者的眼球追蹤VR內容開發大賽

眼球追蹤在5G+XR場景中的新趨勢:七鑫易維XR業務部總經理路偉成

2019年12月18日,由七鑫易維主辦、HTC協辦、NVIDIA提供技術支持的“Droolon杯”眼球追蹤VR內容開發大賽正式啟動。本次大賽旨在推廣眼球追蹤技術在VR領域的廣泛應用,並圍繞HTC Vive系列VR頭顯(包含Cosmos、Focus Plus、Vive Pro等)以及七鑫易維眼球追蹤產品而展開。大賽提供了總價值60萬元的豐厚獎金獎品,其報名截止日期也由原來的3月31日延至4月30日。路偉成表示,受到新冠病毒疫情影響,本次大賽的報名以及後續的評審和頒獎環節有所推延。不過,即使是在疫情之下,也有許多內容團隊報名參賽,其中涵蓋了遊戲、教育、醫療等不同行業的多種應用場景。與此同時,得益於HTC與NVIDIA在海外地區的宣傳,一些海外的內容團隊也參與到本次大賽之中,進一步提升了參賽作品的深度和廣度,對於在全球範圍裡推廣眼球追蹤技術起到了非常積極的作用。

關於本次大賽的評審標準,路偉成透露,大賽評委最為看重的主要有三點。第一點是實用性,評委首先關注參賽作品從哪些方面解決什麼樣的行業痛點或問題,任何技術普及的關鍵都在於其實用性,而徒有酷炫的噱頭則意義不大;第二點是新穎性,本次大賽鼓勵推動相關行業進步的創新應用,而相對來說“重複造輪子”的應用並無太大價值;第三點是商業價值,與純粹學術性的應用相比,在某個細分領域能夠產生較大商業價值的應用將獲得更多青睞。除了以上最為重要的三點,作品的美觀性、技術含量等其他因素也將被列入考察範圍。

4月30日之前,本次大賽的報名通道將繼續面對全球的開發者及內容團隊開放。除了豐厚的獎金及獎品,大賽還獲得了HTC、NVIDIA這樣的科技大廠的強力支持以及更多投資機構的關注。對於希望在XR領域一展拳腳的創業團隊來說,這絕對是一次展現自身實力、獲取更多資源的寶貴機遇,對此感興趣的團隊可以關注七鑫易維的微信公眾號並報名參賽。

眼球追蹤技術在不同應用場景中的新趨勢

眼球追蹤在5G+XR場景中的新趨勢:七鑫易維XR業務部總經理路偉成

在以往的交流中,我印象中眼球追蹤技術有著三大應用方向:注視點渲染、眼動數據分析與眼動交互(即眼控)。這次在瞭解完“Droolon杯”大賽的情況之後,我還請路偉成分享了今年眼球追蹤技術在不同應用場景中呈現出的一些新趨勢。

第一個新趨勢是注視點渲染開始真正成為一種主流應用,而出現這一趨勢的原因主要在於VR頭顯的屏幕分辨率的提升。進入2020年,4K分辨率逐漸成為VR頭顯的主流,一些高端產品還提供了5K及8K分辨率。隨著屏幕分辨率越來越高,VR內容渲染的性能要求與日俱增,其結果就是即使性能較強的PC也會面臨很大的渲染壓力,進而導致用戶使用成本的上升和使用體驗的下降(渲染壓力可能導致畫面掉幀)。而對於諸如VR一體機這樣的移動VR設備,其GPU渲染性能本來就比PC低很多,運行優質、大體量VR內容的渲染壓力自然就更大。在這種情況下,採用注視點渲染技術可以極大降低PC或移動設備的渲染壓力:用戶在體驗VR內容時,只有其注視區域被精確渲染,其餘區域則被低分辨率渲染,由此在理論上可以優化60-80%的數據量。“用戶想要獲得更好的沉浸式體驗,就需要更大的視場角和更高的分辨率,而在這個過程中,渲染壓力將會越來越大,而注視點渲染的重要性也就越來越高。”

第二個新趨勢是一些行業客戶對於虹膜識別的需求逐漸增大。隨著VR硬件及應用在行業市場逐漸普及,有不少應用場景都需要進行用戶身份識別,比如在VR教育場景中,教學系統需要根據不同的學生賬號提供相應的內容,而在VR頭顯裡最方便的身份認證方式就是虹膜識別,用戶只需戴上VR頭顯,系統就能通過識別用戶的虹膜來完成其登錄操作。目前七鑫易維的眼球追蹤產品集成了虹膜識別功能,能夠滿足不同應用場景中的用戶身份識別需求。

第三個新趨勢是眼控作為一種輔助的交互方式,將會融入到未來的自然交互方式之中。“我們看到新的自然交互方式正在逐漸取代手柄,比如Oculus Quest開始支持手勢識別,而眼動作為指向性輸入最為合適。未來我們極有可能通過眼動選擇對象,然後通過手勢與語音進行確認或其他操作,這種眼、手、口結合的自然交互將成為一種趨勢,而眼控將作為一種輔助的交互方式發揮越來越重要的作用。”當我問到眼控會不會造成眼部疲勞時,路偉成告訴我,這主要是一個設計問題:如果包含選擇、確認等操作在內的全部交互都採用眼控,那確實會導致用戶眼部疲勞;但如果將眼控作為眼手口多模態自然交互的一部分,眼動只作為指向性選擇,這種類似用戶在現實生活中的自然行為的交互並不會造成其眼部疲勞。

關於眼球追蹤技術與目前大熱的5G的結合點,路偉成認為,前面提到的注視點渲染對於雲VR同樣適用。“5G使得雲VR服務成為可能,而目前影響其普及的主要因素就是延遲,較大的延遲將造成用戶眩暈,降低其使用體驗。在這方面,注視點渲染一方面可以降低雲端的渲染壓力,另一方面還可以降低網絡傳輸的數據量,其最終結果就是延遲的降低以及用戶體驗的提升。目前基於雲VR的注視點渲染技術方案還處於剛剛啟動測試的階段,我們正在與運營商和雲服務提供商進行探討,希望能夠共同合作,打通這條鏈路。”

基於硬件及軟件的新品佈局

眼球追蹤在5G+XR場景中的新趨勢:七鑫易維XR業務部總經理路偉成

目前,七鑫易維已經為HTC、愛奇藝、小派、影創、0glasses、Nreal等VR/AR硬件廠商的產品提供了相應的眼球追蹤技術解決方案,同時還與Nreal合作推出了集成眼球追蹤功能的MR眼鏡,相關的配件及集成產品將於接下來的五六月份上市。

談到近期疫情的影響,路偉成表示,雖然疫情對於其硬件產品的生產以及“Droolon杯”大賽都產生了一定影響,但同時也催生了一些新的業務需求,比如許多公司開始定期舉行遠程會議,而不少學校也開始實施大規模的遠程教育。相對於採用語音、文字以及二維視頻圖像交流的傳統遠程會議,最接近真實交流的就是VR會議,而眼球追蹤技術可以增加人們在VR會議中的眼神交流,進一步提升用戶的沉浸感。此外,在遠程教育中,老師不像在課堂上一樣可以實時觀察到學生的反饋,而眼球追蹤則可以彌補這點不足,無論是VR頭顯還是筆記本、平板電腦或手機,眼球追蹤技術都可以採集學生的眼動數據(比如學生是否在看屏幕),這些數據能夠及時有效的反饋教學效果,有利於遠程教育教學質量的提升。目前七鑫易維正在積極佈局遠程教育相關的眼球追蹤技術方案,以滿足近期已成為剛需的遠程教育需求。

在新品研發上,七鑫易維正在根據市面上VR/AR硬件主體的形態變化進行跟進,比如從去年開始出現的緊湊型光學方案(短焦VR眼鏡)正在逐步走向主流,而技術團隊也相應推出了面向緊湊型光學硬件的解決方案。除了硬件的升級迭代,七鑫易維還在軟件層面上進行佈局,推出了一系列連接硬件與內容廠商的“中間層”產品,比如具備眼動數據分析功能的插件,開發者只需在自己熟悉的開發環境中加入這類插件,就可以輕鬆集成採集用戶眼動數據並進行分析的功能,如此也相應減輕了開發者的開發負擔。

眼球追蹤在5G+XR場景中的新趨勢:七鑫易維XR業務部總經理路偉成

此次與路總的交流,讓我對於眼球追蹤技術的應用及前景獲得了更為全面的認識。在全新的2020年代,我們看到了這項技術更加廣闊的市場空間以及對於XR產業的推動作用。在此我們衷心祝願七鑫易維能夠在相關技術快速發展的進程中扮演越來越重要的角色,並讓眼睛這扇心靈的窗戶在未來帶給我們一個更加美麗的世界。
【93913原創內容,轉載請註明及回鏈】



分享到:


相關文章: