在自動(dòng)駕駛、智能駕駛輔助系統(tǒng)(ADAS)中,相機(jī)與毫米波雷達(dá)是感知層的核心互補(bǔ)傳感器:相機(jī)擅長(zhǎng)捕捉環(huán)境紋理、語(yǔ)義信息與目標(biāo)輪廓,能精準(zhǔn)識(shí)別交通標(biāo)識(shí)、車道線與目標(biāo)類別;毫米波雷達(dá)則不受雨、霧、雪、強(qiáng)光等惡劣天氣影響,可穩(wěn)定輸出目標(biāo)距離、速度、角度等動(dòng)態(tài)參數(shù),穿透性強(qiáng)、測(cè)距精度高。二者數(shù)據(jù)融合是實(shí)現(xiàn)魯棒環(huán)境感知的關(guān)鍵,而“相機(jī)-毫米波雷達(dá)外參標(biāo)定”是打通數(shù)據(jù)壁壘、實(shí)現(xiàn)空間精準(zhǔn)對(duì)齊的核心前提。只有通過(guò)標(biāo)定求解出兩者的相對(duì)旋轉(zhuǎn)、平移關(guān)系,才能讓毫米波雷達(dá)的三維目標(biāo)與相機(jī)的二維像素精準(zhǔn)匹配,避免融合感知出現(xiàn)目標(biāo)錯(cuò)位、漏檢、誤檢等問(wèn)題。
本文聚焦相機(jī)-毫米波雷達(dá)外參標(biāo)定全流程,從核心原理、坐標(biāo)系定義、主流標(biāo)定方法、實(shí)操關(guān)鍵步驟入手,深度拆解誤差來(lái)源、量化評(píng)價(jià)標(biāo)準(zhǔn)與優(yōu)化方案,兼顧理論深度與工程落地性,為智能駕駛傳感器標(biāo)定提供完整實(shí)操指南。
外參標(biāo)定的本質(zhì)是建立兩個(gè)傳感器之間的空間映射關(guān)系,而清晰的坐標(biāo)系定義是標(biāo)定工作的前提,也是理解標(biāo)定邏輯、分析誤差的基礎(chǔ)。
核心坐標(biāo)系梳理
相機(jī)-毫米波雷達(dá)外參標(biāo)定涉及四大核心坐標(biāo)系,形成從雷達(dá)三維空間到相機(jī)二維像素的完整傳遞鏈路,每個(gè)坐標(biāo)系的原點(diǎn)與軸向定義直接影響標(biāo)定精度:
毫米波雷達(dá)坐標(biāo)系:原點(diǎn)通常位于雷達(dá)天線幾何中心,行業(yè)通用定義為X軸向前(車輛行駛方向)、Y軸向左、Z軸向上,雷達(dá)探測(cè)到的目標(biāo)距離、方位角、俯仰角,均基于該坐標(biāo)系轉(zhuǎn)換為三維坐標(biāo),是雷達(dá)數(shù)據(jù)的原生參考系。
相機(jī)坐標(biāo)系:原點(diǎn)位于相機(jī)鏡頭光心,Z軸沿光軸向前指向拍攝場(chǎng)景,X軸向右、Y軸向下,是連接三維空間與二維圖像的中間橋梁,依賴相機(jī)內(nèi)參完成后續(xù)投影。
圖像物理坐標(biāo)系:位于相機(jī)成像平面,原點(diǎn)在圖像中心,單位為毫米,記錄光線經(jīng)鏡頭折射后的物理投射位置,銜接相機(jī)坐標(biāo)系與像素坐標(biāo)系。
像素坐標(biāo)系:原點(diǎn)在圖像左上角,單位為像素,是視覺(jué)感知的輸出坐標(biāo)系,雷達(dá)目標(biāo)需投影至該坐標(biāo)系,實(shí)現(xiàn)與圖像目標(biāo)的對(duì)齊。
外參的物理意義
相機(jī)-毫米波雷達(dá)外參是描述兩個(gè)傳感器相對(duì)空間位姿的參數(shù),包含6個(gè)自由度參數(shù):3個(gè)旋轉(zhuǎn)參數(shù)(橫滾角Roll、俯仰角Pitch、航向角Yaw)和3個(gè)平移參數(shù)(X、Y、Z軸方向偏移量)。
其核心作用是將毫米波雷達(dá)坐標(biāo)系下的三維目標(biāo)點(diǎn),通過(guò)旋轉(zhuǎn)和平移變換,轉(zhuǎn)換至相機(jī)坐標(biāo)系下,再結(jié)合相機(jī)內(nèi)參,投影到像素坐標(biāo)系中。簡(jiǎn)單來(lái)說(shuō),外參解決的是“雷達(dá)目標(biāo)在圖像中對(duì)應(yīng)哪個(gè)像素位置”的問(wèn)題,外參精度直接決定多傳感器融合的可靠性。
需要特別注意的是,外參屬于傳感器相對(duì)位置參數(shù),一旦相機(jī)、雷達(dá)的安裝支架發(fā)生形變、傳感器松動(dòng)或拆卸重裝,外參就會(huì)發(fā)生漂移,需要重新標(biāo)定;同時(shí),外參標(biāo)定前需完成相機(jī)單獨(dú)內(nèi)參標(biāo)定,畸變系數(shù)、焦距、主點(diǎn)坐標(biāo)等內(nèi)參誤差,會(huì)直接傳導(dǎo)至外參標(biāo)定結(jié)果中。