Nebula正在會為Light AR眼鏡帶來手部追蹤功能
Nreal的3D系統(tǒng)Nebula正在迎來重大升級,它將會為Light AR眼鏡帶來手部追蹤功能,并允許用戶通過多種手勢與數(shù)字對象進行交互,從而增強設(shè)備在工作環(huán)境和學(xué)習(xí)環(huán)境中的效用,并促進用戶與朋友和家人的聯(lián)系。
Nebula系統(tǒng)的高保真手部追蹤是通過與Clay AIR的合作產(chǎn)物,后者是一家手部追蹤和手勢識別公司,致力于開發(fā)高精度且跨硬件的交互軟件,并為聯(lián)想,Bose,高通和泰雷茲集團等客戶的光學(xué)手部追蹤解決方案提供支持。
Magic Leap 1,微軟HoloLens 2,以及現(xiàn)在的Oculus Quest都支持手部追蹤,所以Nreal明白,如果要保持市場中保持競爭力,他們同樣需要為消費者,以及3500名正在為Nreal Light眼鏡構(gòu)建AR體驗的開發(fā)者帶來所述功能。
為了對Nreal Light眼鏡進行手部追蹤,Clay AIR充分利用了內(nèi)置的嵌入式空間攝像頭,將3D手部骨架模型以全高清方式疊加在物理手部。然后,系統(tǒng)將通過先進的深度學(xué)習(xí)算法來實時追蹤和渲染手部動作。
如果你擁有一副Nreal Light眼鏡,或者你是開發(fā)者,你首先想到的問題是原生手部追蹤將會對續(xù)航產(chǎn)生多大影響。令人驚訝的是,所述功能的耗電量并不大。你應(yīng)該不會注意到它給設(shè)備電池或任何高通驍龍855 5G智能手機造成的壓力。
Nreal將很快通過SDK啟動為用戶帶來手部追蹤。所述功能可以輕松部署到運行Nreal 3D系統(tǒng)的本機Android應(yīng)用,如Facebook,Spotify,Netflix和Instagram。作為開發(fā)者,你將能夠構(gòu)建包括3D手勢模型,單獨手指操作,邊界框,光標(biāo)和定制皮膚的手部追蹤體驗。
Clay AIR提供的手勢庫將包括拿捏,指向,抓握,滑動和縮放,以及其他一系列可自定義的選項。
“通過與Clay AIR合作提供手部追蹤功能,Nreal為開發(fā)者和Nreal Light Consumer Kit的用戶就如何與MR環(huán)境進行交互提供了更高的靈活度。”公司創(chuàng)始人兼首席執(zhí)行官徐馳表示,并進一步補充說:“無論是手部追蹤,將5G智能手機用作控制器,第三方六自由度控制器,甚至是不久將來與七鑫易維合作實現(xiàn)的眼動追蹤。”
通過將這一新功能帶到Nebula系統(tǒng),Nreal正在創(chuàng)建易于使用的硬件/軟件體驗,并進一步簡化將AR推向大眾的過程。Clay AIR首席執(zhí)行官托馬斯·埃米利安(Thomas Amilien)指出: “無縫的手部追蹤和手勢識別技術(shù)是幫助AR在全球范圍內(nèi)實現(xiàn)普及和變得實用的必要催化劑。”
最終,這種合作伙伴關(guān)系標(biāo)志著一個重要的轉(zhuǎn)折點:這是用于AR空間追蹤的嵌入式單色攝像頭首次與手部追蹤集成,以及是通過與德國電信擴大的運營商伙伴關(guān)系而實現(xiàn)。
對于Nreal,Clay AIR,以及消費者而言,這項新功能是一次巨大的勝利。這是能夠推動AR發(fā)展的消費者采用。我們需要朝著用戶無需佩戴笨重設(shè)備即可獲得強大AR體驗的未來進發(fā)。這個合作將能夠幫助我們實現(xiàn)愿望。





