基于DSP與雙目CMOS 攝像頭的數(shù)字圖像處理系統(tǒng)
傳統(tǒng)的數(shù)字圖像處理通常采用圖像采集卡,將模擬電視信號轉(zhuǎn)換成數(shù)字信號,然后由pc機進行軟處理。這樣不僅不夠靈活,處理能力也受到pc機和軟件的限制。隨著cmos成像芯片工藝的改進和數(shù)字信號處理器功能的提升,使得數(shù)據(jù)量與計算量較大的圖像硬處理成為可能。本文詳細介紹了通過兩路cmos攝像頭采集圖像,以浮點dsp為核心處理器,采用60萬門fpga實現(xiàn)邏輯控制的數(shù)字圖像采集處理系統(tǒng)的設計原理和實現(xiàn)方法。本系統(tǒng)所采用的芯片與器件,在保證性能的同時,兼顧低功耗,整個系統(tǒng)可以由1394線纜供電。 1 原理概述 整個系統(tǒng)的原理框圖如圖1所示。系統(tǒng)上電后,fpga配置子板把配置文件加載到fpga中。dsp由外部 flash引導,通過fpga先設置1394接口芯片的內(nèi)部寄存器,再通過i2c總線設置攝像頭1、2的控制寄存器。fpga提供攝像頭的工作時序和圖像序列的讀寫時序。云臺在dsp的控制下可以上下左右調(diào)整,捕捉感興趣的目標。8片1mb的sram作為兩路攝像頭的數(shù)據(jù)存儲器,16mb的sdram則充當dsp的外部數(shù)據(jù)緩沖。處理后的圖像既可以直接輸出至lcd進行顯示,也可以通過1394總線傳送至pc機。
整個系統(tǒng)由三部分構(gòu)成:圖像采集模塊、圖像處理模塊和圖像傳輸模塊。 2.1 圖像采集模塊 該模塊主要由兩組cmos攝像頭和云臺組成。該模塊的接口信號見圖2。
攝像頭借助云臺跟蹤運動目標,水平旋轉(zhuǎn)范圍為-180°～180°;垂直旋轉(zhuǎn)范圍為-45°～45°。
考慮到運動圖像處理至少需要3幀的序列圖像,每組攝像頭配備了4片ram。3片做數(shù)據(jù)采集緩沖,1片存儲dsp處理后的結(jié)果。 2.2 圖像處理模塊
該模塊由dsp、fpga和數(shù)據(jù)緩存器組成。 2.2.1 主要器件的選型
dsp主要完成的功能有:
(1)加電自舉,初始化1394接口芯片;
(2)通過i2c接口設置攝像頭的寄存器; (3)對圖像進行預處理,提高成像質(zhì)量; (4)控制云臺的轉(zhuǎn)動,實現(xiàn)運動目標的跟蹤。 fpga在本系統(tǒng)中的作用有: (1)提供圖像采集、存儲與傳輸?shù)墓ぷ鲿r序; (2)協(xié)同dsp實現(xiàn)復雜的組合邏輯控制電路; (3)實現(xiàn)標準的vga接口,外接lcd顯示器。 基于以上要求,本系統(tǒng)采用ti公司的32位浮點dsp tms320c6711b。6711b采用改進的哈佛總線結(jié)構(gòu),主頻為150mhz,內(nèi)部集成硬件乘法器和累加器,采用流水線velocititm甚長指令字(vliw)指令,具有豐富的片上外設,并有專門針對數(shù)字信號處理的指令系統(tǒng),運算能力可達1200mflops,適用于計算量大、實時性高的數(shù)字圖像處理領(lǐng)域。fpga 則采用altera公司apex系列的ep20k600ebc652。ep20k600ebc652具有高速度(622mhz的數(shù)據(jù)速率)、高密度(有效邏輯60萬門)、低噪聲和低功耗的特點。有4個pll、480個低電壓差分信號(lvds)的i/o口,工作電壓為2.5v和1.8v。 2.2.2 圖像的預處理
運動目標檢測與跟蹤、目標的識別與提取等基于圖像內(nèi)容的處理,對圖像質(zhì)量要求較高。影響成像質(zhì)量的兩個重要因素為曝光和白平衡:人眼對外部環(huán)境的明暗變化非常敏感,在強光環(huán)境下,瞳孔縮小,使得景物不那么刺眼;而光線較弱時,瞳孔擴大,使景物盡可能地變清楚。這在成像中,稱為曝光。當外界光線較弱時,cmos成像芯片工作電流較小,所成圖像偏暗,這時要適當增加曝光時間進行背光補償;光線充足或較強時,要適當減少曝光時間,防止曝光過度,圖像發(fā)白。改善成像質(zhì)量,僅靠調(diào)節(jié)曝光時間是不夠的。因為物體顏色會隨照射光線的顏色發(fā)生改變,在不同的光線場合圖像有不同的色溫。這就是白平衡問題。傳統(tǒng)光學相機或攝像機通過給鏡頭加濾鏡消除圖像的偏色現(xiàn)象。對于cmos成像芯片,可以通過調(diào)整rgb三基色的電子增益解決白平衡問題。 本系統(tǒng)的自動曝光控制和白平衡處理實現(xiàn)方法如下: 采集一幀rgb原始圖像,在6711b中先計算出整幅圖像亮度的均值m(y);然后對圖像做直方
下載文檔
