眼球追蹤技術(shù)在消費(fèi)端很早之前就已經(jīng)應(yīng)用在手機(jī)上,現(xiàn)如今,也有一些VR設(shè)備將這項(xiàng)技術(shù)融入其中,除了國內(nèi)的七鑫易維、青研科技等之外,比如日本的FOVE、瑞典的Tobii等都在研究眼球追蹤和VR/AR的結(jié)合。下面就隨嵌入式小編一起來了解一下相關(guān)內(nèi)容吧。

眼球追蹤到底能為VR/AR的體驗(yàn)帶來多大的變革,近日,瑞典的Tobii就這個(gè)問題給出了6大理由。

現(xiàn)在的VR/AR設(shè)備是“盲目”的

“現(xiàn)在的VR/AR設(shè)備并不具備理解用戶的功能”,Tobii的商務(wù)總監(jiān)Oscar提到。他認(rèn)為,現(xiàn)在的VR/AR設(shè)備都是“被動(dòng)”的,只是一味地接受用戶的指令,即便是iPhone X這樣具備面部識別功能的設(shè)備,也并沒有充分的理解用戶。

給設(shè)備裝上“眼睛”,讓設(shè)備能夠理解用戶,從而實(shí)現(xiàn)更好的體驗(yàn),Oscar認(rèn)為眼球追蹤是實(shí)現(xiàn)這項(xiàng)功能的重要技術(shù)。

Tobii一直在研發(fā)眼球追蹤功能,其能夠與PC、VR設(shè)備結(jié)合,去年6月發(fā)布了HTC Vive+眼球追蹤的開發(fā)套件——VR4,并且和高通合作,目標(biāo)是讓眼球追蹤成為VR頭顯的標(biāo)配功能,讓每一臺VR設(shè)備中都包含這項(xiàng)功能。

眼球追蹤帶來的進(jìn)化

Tobii目前將眼球追蹤技術(shù)應(yīng)用在六大領(lǐng)域,并且將其分為“讓設(shè)備進(jìn)化”和“讓體驗(yàn)進(jìn)化”兩個(gè)大方向。

讓設(shè)備進(jìn)化

讓設(shè)備進(jìn)化的分類中主要分為Foveated Rendering(注視點(diǎn)渲染技術(shù))、Eye PosiTIon(眼球定位)、Biometrics(生物特征識別)三大塊。

注視點(diǎn)渲染技術(shù)被認(rèn)為是下一代頭顯必備的能力,該技術(shù)能夠讓頭顯降低對顯卡渲染的要求,顯卡會集中渲染用戶眼睛注視的區(qū)域,而在這之外的區(qū)域則逐層模糊顯示。

眼球定位則可以通過檢測眼球的位置,讓內(nèi)容始終處于視角的中心,達(dá)到提高VR體驗(yàn)的效果。最后一項(xiàng)生物特征識別則是通過瞳孔的特征來識別用戶,來實(shí)現(xiàn)諸如自動(dòng)登錄等功能。

讓體驗(yàn)進(jìn)化

和內(nèi)容、體驗(yàn)直接相關(guān)聯(lián)的則被分為“眼球追蹤操作”、“社交·互動(dòng)”、“分析”三大領(lǐng)域。

Oscar重點(diǎn)介紹了眼球追蹤操作。“在PC時(shí)代,人們的操作習(xí)慣是在眼睛看到目標(biāo)后,移動(dòng)鼠標(biāo)、點(diǎn)擊,達(dá)到操作目的,鼠標(biāo)、鍵盤成為中間的介質(zhì);而當(dāng)智能手機(jī)出現(xiàn),用戶能夠直接用手來進(jìn)行操作,觸屏、滑屏大大節(jié)省了操作時(shí)間。”

PC:識別目標(biāo)→移動(dòng)鼠標(biāo)→點(diǎn)擊

智能手機(jī):識別目標(biāo)→手指點(diǎn)擊

現(xiàn)在大多VR內(nèi)容:識別目標(biāo)→移動(dòng)控制器→點(diǎn)擊

對于習(xí)慣了這種操作的現(xiàn)在的用戶來說,VR體驗(yàn)的速度感并不強(qiáng),甚至?xí)X得有些慢,而眼球追蹤則成為一種最直接的交互方式,而且最能夠理解用戶的需求。

此外,在“社交·互動(dòng)”這一塊,Oscar展示了一個(gè)Demo。在社交應(yīng)用中,最重要的是交流互動(dòng),除了虛擬形象以及聲音之外,肢體語言、臉部表情、眼神都是促進(jìn)交流的重要因素。在Demo中,沒有使用眼球追蹤的Avatar看起來僵硬,完全看不透是什么樣的情緒;而使用了眼球追蹤的Avatar則看起來生動(dòng)許多。

在今年的GDC2018上,高通展示了搭載了驍龍845的最新的VR一體機(jī),其中高就結(jié)合了Tobii的眼球追蹤套件。

提高手勢識別的精度

除了在以上幾個(gè)領(lǐng)域之外,Tobii還在研究使用眼球追蹤來提高手勢識別的精準(zhǔn)度?，F(xiàn)在很多運(yùn)動(dòng)相關(guān)的模擬體驗(yàn)以及游戲中都在大量使用VR,手勢識別也在其中尋找一席之地。

比如投球這樣的一個(gè)動(dòng)作,由于每個(gè)人的手臂長度、投球的動(dòng)作都不一樣,用手勢識別很難識別球投向了哪個(gè)位置,但是加上眼球追蹤的話,就能知道用戶看的是哪個(gè)位置,收集數(shù)據(jù)從而推測出球的目標(biāo)點(diǎn)。不論是在模擬訓(xùn)練還是在VR游戲的開發(fā)中都能夠起到不錯(cuò)的效果。

眼球追蹤讓VR/AR進(jìn)化的六大理由

最后,Oscar稱Tobii今后還將繼續(xù)在眼球追蹤技術(shù)上投入更多精力來做研發(fā),讓VR/AR體驗(yàn)進(jìn)入下一階段——理解用戶。