聯(lián)合標(biāo)定的核心邏輯是:通過共同觀測的標(biāo)定靶標(biāo),獲取多組3D(LiDAR)-2D(相機(jī))對應(yīng)特征點(diǎn),利用這些匹配點(diǎn)求解外參,再通過優(yōu)化減小投影誤差。整個(gè)過程圍繞“特征匹配-參數(shù)求解-誤差優(yōu)化”展開,自動(dòng)駕駛場景常用的標(biāo)定方法分為靶標(biāo)式標(biāo)定(離線高精度)和無靶標(biāo)標(biāo)定(在線自適應(yīng))兩類。
靶標(biāo)式標(biāo)定:量產(chǎn)車主流方案(棋盤格/AprilTag/3D靶標(biāo))
靶標(biāo)式標(biāo)定是目前自動(dòng)駕駛量產(chǎn)、實(shí)驗(yàn)室標(biāo)定的首選方案,精度高、穩(wěn)定性強(qiáng),依賴高精度標(biāo)定靶標(biāo)提供精準(zhǔn)的3D-2D對應(yīng)點(diǎn)。
標(biāo)定靶標(biāo)選擇
棋盤格靶標(biāo):成本低、角點(diǎn)易提取,相機(jī)可精準(zhǔn)檢測內(nèi)角點(diǎn),LiDAR可識別平面與角點(diǎn),適合離線靜態(tài)標(biāo)定,是常用的靶標(biāo)類型。
AprilTag靶標(biāo):自帶編碼ID,可實(shí)現(xiàn)多靶標(biāo)同時(shí)匹配,抗遮擋、抗干擾能力強(qiáng),適合復(fù)雜場景與多傳感器協(xié)同標(biāo)定。
3D立體靶標(biāo):精度較高,適合高階自動(dòng)駕駛與激光雷達(dá)密集點(diǎn)云場景,成本相對較高。
標(biāo)定核心流程(原理層面)
同步觀測:LiDAR與相機(jī)同時(shí)拍攝標(biāo)定靶標(biāo),保證時(shí)間戳嚴(yán)格對齊,避免運(yùn)動(dòng)模糊導(dǎo)致特征偏移。
特征提取:在相機(jī)圖像中提取靶標(biāo)角點(diǎn)/編碼點(diǎn)(2D像素坐標(biāo)),在LiDAR點(diǎn)云中提取對應(yīng)靶標(biāo)的三維角點(diǎn)(3D空間坐標(biāo))。
初始外參求解:利用多組3D-2D匹配點(diǎn),通過幾何約束計(jì)算初始旋轉(zhuǎn)和平移參數(shù),得到粗略外參。
非線性優(yōu)化:以“重投影誤差”為優(yōu)化目標(biāo),迭代調(diào)整外參,讓LiDAR點(diǎn)云投影到圖像后的位置,與實(shí)際觀測的像素點(diǎn)偏差較小。
精度校驗(yàn):驗(yàn)證投影誤差是否滿足閾值要求,不合格則重新采集數(shù)據(jù)或優(yōu)化參數(shù)。
無靶標(biāo)標(biāo)定:自適應(yīng)在線方案
無靶標(biāo)標(biāo)定無需專門標(biāo)定物,利用環(huán)境中自然特征(如路面邊緣、建筑棱角、路燈桿)實(shí)現(xiàn)3D-2D匹配,適合車輛行駛過程中的在線標(biāo)定、外參自適應(yīng)修正(解決車輛顛簸、溫度變化導(dǎo)致的外參漂移)。
其原理是通過特征匹配算法,自動(dòng)尋找圖像與點(diǎn)云中的同名特征(如角點(diǎn)、邊緣、平面),構(gòu)建約束關(guān)系求解外參;結(jié)合深度學(xué)習(xí)算法還可實(shí)現(xiàn)端到端標(biāo)定,提升復(fù)雜路況下的魯棒性,但精度略低于靶標(biāo)式標(biāo)定,通常與靶標(biāo)標(biāo)定配合使用。
核心評價(jià)指標(biāo):重投影誤差
標(biāo)定精度的核心衡量標(biāo)準(zhǔn)是重投影誤差:將LiDAR點(diǎn)云通過標(biāo)定好的外參和相機(jī)內(nèi)參,投影到圖像上得到預(yù)測像素點(diǎn),與實(shí)際圖像中觀測到的像素點(diǎn)的偏差。
自動(dòng)駕駛場景對誤差要求嚴(yán)苛:平均重投影誤差需控制在1像素以內(nèi),誤差不超過1.5像素,否則會導(dǎo)致障礙物定位偏移、融合感知失效,嚴(yán)重影響行車安全。