2019年以來，百度視覺技術(shù)不斷精進，在各大國際賽事屢屢奪冠。在近日的百度AI開發(fā)者大會中，百度視覺技術(shù)再次升級，在經(jīng)歷了從看清世界到看懂世界的1.0時代，百度視覺語義化平臺將進入2.0時代，交互升級方面，依靠領(lǐng)先的視覺基礎(chǔ)技術(shù)，帶來一體化人機交互與大場景物理世界交互兩大增強現(xiàn)實技術(shù)的系統(tǒng)級革新；同時百度AR技術(shù)開放平臺DuMix AR也宣布升級為5.0版本。

百度視覺技術(shù)部、增強現(xiàn)實技術(shù)部總監(jiān)吳中勤表示，在小視頻應(yīng)用中常見的美顏濾鏡、貼紙等功能，以及手機相機中自帶的AR萌拍，背后都離不開AR特效能力的加持。在本次全新發(fā)布的一體化人機交互系統(tǒng)中，帶來了人臉、人體、手勢及環(huán)境特效等AR能力的創(chuàng)新變革，通過單點能力升級和玩法組合，將為視頻拍攝、游戲互動等場景提供更豐富的創(chuàng)作空間和交互體驗。

據(jù)吳中勤介紹，百度AR從自建人臉數(shù)據(jù)庫的海量數(shù)據(jù)中提取東方人臉型基底，并以此為基礎(chǔ)構(gòu)建了一套穩(wěn)定高效的用戶臉型三維重建算法，實現(xiàn)精細化五官和實時穩(wěn)定的皮膚級跟蹤效果。手勢交互玩法方面，百度AR建立了一系列業(yè)內(nèi)領(lǐng)先的超輕量級（計算量小，體積?。┦植拷换ニ惴芰仃?，除了常見的控雨等手勢控制操作，還能自定義手部特效、空間作畫等多種創(chuàng)意玩法，在全民小視頻、好看視頻等應(yīng)用中備受歡迎。

在移動端，百度率先支持了18點/59點肢體骨骼點/輪廓點檢測跟蹤和主流機型的全面覆蓋；環(huán)境感知和理解方面，包含人像分割、天空分割、物體檢測等多項算法能力在內(nèi)的特效能力矩陣，實現(xiàn)了物理世界1：1實景實時分割，可以任意選擇背景替換、染發(fā)、天空特效、動畫疊加等AR效果。

交互技術(shù)的升級還將更深入地賦能智慧生活場景。現(xiàn)場，吳中勤通一個鮮活的案例展現(xiàn)了智能車機綜合實現(xiàn)疲勞駕駛提醒、語音視覺的互動操控，以及利用3D識別跟蹤技術(shù)實現(xiàn)與小度在家等家庭智能設(shè)備的交互。全新的一體化人機交互系統(tǒng)已全面接入百度智能云平臺，支持為企業(yè)提供更全面、更易用的智能化能力和更完善的視頻解決方案。

交互升級的另一大焦點，是基于VPAS（視覺定位與增強服務(wù)）的大場景物理世界交互系統(tǒng)的發(fā)布。百度首次通過視覺定位與AR技術(shù)的突破性結(jié)合，將虛擬信息與真實地理位置準(zhǔn)確重合，標(biāo)志著國內(nèi)AR技術(shù)發(fā)展與應(yīng)用領(lǐng)域取得突破性進展——在從簡單的空間物體放置體驗，邁向基于物理空間精準(zhǔn)感知的高沉浸混合現(xiàn)實體驗。

據(jù)悉，VPAS主要包含離線高精地圖構(gòu)建、在線定位與融合跟蹤三大基礎(chǔ)模塊，相比GPS具備更穩(wěn)定的實時跟蹤能力，支持室外大場景及室內(nèi)場景厘米級高精度定位。而且，百度AR采用了最具前瞻性的視覺技術(shù)方案，以及兼容Google、Apple平臺的持續(xù)跟蹤能力與獨有自研跟蹤能力共同構(gòu)成的融合跟蹤方案，能夠支持當(dāng)前市場主流手機設(shè)備的全場景體驗需求；同時結(jié)合百度視覺語義化能力，持續(xù)提升在線定位與實時跟蹤的穩(wěn)定性和精準(zhǔn)度。

百度AR在視覺信息要素積累的基礎(chǔ)上實現(xiàn)了一套完整的視覺地圖構(gòu)建方案，即實行眾源數(shù)據(jù)采集模式，對用戶通過手機收集反饋的圖像數(shù)據(jù)進行處理分析，結(jié)合百度地圖的地理位置信息持續(xù)更新完善視覺地圖。吳中勤指出，目前百度AR已打通常見三維重建數(shù)據(jù)導(dǎo)入接口，并且兼容相同格式下的第三方數(shù)據(jù)，具備易集成特性和數(shù)據(jù)批量化生產(chǎn)能力。

現(xiàn)場，吳中勤還展示了VPAS首個落地應(yīng)用案例——重建圓明園大水法。當(dāng)用戶跟隨百度地圖導(dǎo)航走進圓明園西洋樓景區(qū)，VPAS將自動“找到”大水法遺址，在殘垣斷壁上重新建立起100多年前雕欄玉砌、“獵狗逐鹿”的恢弘奇景。這也是將百度AI能力與5G技術(shù)結(jié)合的第一個落地應(yīng)用場景。隨著5G時代到來，AI與5G/邊緣計算相互賦能不斷深化，將以大水法為起點，拓展景區(qū)、商圈等更多室內(nèi)外場景，結(jié)合VPAS為物理世界可視化導(dǎo)航服務(wù)帶來體驗式變革。

吳中勤表示，“隨著5G時代的到來，百度AR依托視覺技術(shù)優(yōu)勢所構(gòu)建的虛實場景融合的基礎(chǔ)設(shè)施，將不斷彌合虛擬世界與物理世界的間隙，刷新人們探索世界的方式?！?/p>