多目視覺在掃地機(jī)器人定位中的應(yīng)用實(shí)現(xiàn)
定位是掃地機(jī)器人自主作業(yè)的基礎(chǔ),核心是實(shí)時(shí)確定機(jī)器人在環(huán)境中的坐標(biāo)位置與姿態(tài)角度,多目視覺通過多視角特征跟蹤、位姿解算、誤差融合,實(shí)現(xiàn)高精度、高魯棒性的自主定位,適配家居復(fù)雜場景的動態(tài)變化。
多目視覺定位的核心流程
多目視覺定位流程分為圖像采集、特征提取與匹配、位姿解算、定位優(yōu)化四個(gè)階段。首先,多攝像頭同步采集連續(xù)幀圖像,完成鏡頭畸變校正與視角校準(zhǔn),消除硬件安裝偏差帶來的定位誤差;其次,提取圖像中的SIFT、SURF、ORB等穩(wěn)定特征點(diǎn),通過極線約束與雙向匹配算法,完成多視角、連續(xù)幀間的特征點(diǎn)匹配,剔除誤匹配特征,保留有效匹配對;隨后,基于匹配特征點(diǎn)與三維空間坐標(biāo),結(jié)合PnP算法與IMU、里程計(jì)數(shù)據(jù),解算機(jī)器人的旋轉(zhuǎn)矩陣與平移向量,確定當(dāng)前位姿;采用滑動窗口優(yōu)化、閉環(huán)檢測算法,修正累計(jì)誤差,提升長時(shí)間作業(yè)的定位穩(wěn)定性。
家用場景定位優(yōu)化策略
針對家居環(huán)境的特殊性,多目視覺定位系統(tǒng)做了多項(xiàng)適配優(yōu)化。針對家具、墻面等靜態(tài)場景,通過多視角特征復(fù)用,提升特征點(diǎn)跟蹤的連續(xù)性,減少位姿跳變;針對行人、寵物等動態(tài)障礙物,采用動態(tài)特征剔除算法,過濾移動目標(biāo)干擾,僅依靠靜態(tài)環(huán)境特征進(jìn)行定位;針對低光照、弱紋理區(qū)域(如純色墻面、空曠地面),結(jié)合多視角深度信息與IMU數(shù)據(jù)融合定位,彌補(bǔ)視覺特征缺失的短板;針對狹小空間(如床下、沙發(fā)下、走廊),利用多攝像頭互補(bǔ)視角,擴(kuò)大特征感知范圍,避免定位丟失。
此外,多目視覺定位可實(shí)現(xiàn)厘米級定位精度,配合閉環(huán)檢測功能,當(dāng)機(jī)器人重新經(jīng)過已探測區(qū)域時(shí),快速匹配歷史特征,修正定位漂移,保證長時(shí)間清掃、大面積戶型作業(yè)時(shí)的定位準(zhǔn)確性,為路徑規(guī)劃、區(qū)域覆蓋、斷點(diǎn)續(xù)掃提供可靠的位置依據(jù)。
多目視覺在掃地機(jī)器人建圖中的應(yīng)用實(shí)現(xiàn)
建圖與定位同步進(jìn)行,多目視覺不僅能構(gòu)建傳統(tǒng)幾何地圖,還能結(jié)合語義信息生成三維語義地圖,讓掃地機(jī)器人不僅知曉空間輪廓,更能理解環(huán)境屬性,實(shí)現(xiàn)精細(xì)化清潔規(guī)劃,這也是多目視覺相較于傳統(tǒng)方案的核心突破。
多目視覺建圖的類型與構(gòu)建流程
多目視覺建圖分為三維幾何地圖與語義地圖兩類,滿足不同層級的清潔需求。三維幾何地圖依托多目立體視覺獲取的環(huán)境深度信息,記錄家居空間的輪廓、障礙物位置、地面起伏、樓梯落差等幾何信息,構(gòu)建柵格地圖或點(diǎn)云地圖,為避障、路徑規(guī)劃提供空間依據(jù);語義地圖則在幾何地圖基礎(chǔ)上,疊加多目視覺識別的物體類別、區(qū)域功能、地面材質(zhì)等語義標(biāo)簽,標(biāo)記客廳、臥室、廚房等功能區(qū)域,區(qū)分地毯、瓷磚、家具、雜物等目標(biāo)屬性,實(shí)現(xiàn)場景化清潔。
建圖流程中,多目視覺系統(tǒng)實(shí)時(shí)采集環(huán)境三維點(diǎn)云數(shù)據(jù),通過濾波算法剔除噪聲點(diǎn),保留有效環(huán)境特征;將連續(xù)幀的點(diǎn)云數(shù)據(jù)進(jìn)行配準(zhǔn)融合,逐步擴(kuò)展地圖范圍;結(jié)合定位位姿信息,優(yōu)化地圖拼接精度,消除重疊區(qū)域誤差;針對家居動態(tài)變化,采用增量式建圖策略,實(shí)時(shí)更新地圖中的臨時(shí)障礙物、布局變動信息,保證地圖與實(shí)際環(huán)境一致。
家用場景建圖優(yōu)化策略
家用環(huán)境存在布局復(fù)雜、障礙物多樣、透明/反光物體多等特點(diǎn),多目視覺建圖通過多視角信息融合,有效解決傳統(tǒng)建圖方案的痛點(diǎn)。針對玻璃茶幾、鏡子等透明/反光物體,多目視覺通過多視角紋理特征與深度信息校驗(yàn),區(qū)分真實(shí)障礙物與反光干擾,避免地圖空洞或誤標(biāo)障礙物;針對地毯、腳墊等低矮物體,結(jié)合底部與前部多攝像頭數(shù)據(jù),精準(zhǔn)檢測物體高度與邊界,完善地圖細(xì)節(jié);針對復(fù)式戶型、樓梯等落差區(qū)域,利用多目深度感知能力,標(biāo)記防跌落區(qū)域,構(gòu)建分層地圖,支持跨樓層建圖與定位。
此外,多目視覺建圖可生成稠密三維地圖,相較于激光雷達(dá)的稀疏點(diǎn)云地圖,能更細(xì)膩地還原家居環(huán)境細(xì)節(jié),為區(qū)域劃分、禁區(qū)設(shè)置、重點(diǎn)清潔區(qū)標(biāo)記提供更精準(zhǔn)的載體,提升用戶自定義清潔的靈活性。





