【文章內(nèi)容簡(jiǎn)介】 性，牌照位置的不確定性，圖像質(zhì)量的不可預(yù)知性，給牌照的定位與分割增加了很大的難度。從人的視覺特點(diǎn)出發(fā)，車牌目標(biāo)區(qū)域具有如下特點(diǎn)：車牌底色往往與車身顏色、字符顏色有較大差異；車牌有一個(gè)連續(xù)或由于磨損而不連續(xù)的邊框，車牌內(nèi)有七個(gè)字符，基本成水平排列，所以在牌照的矩形區(qū)內(nèi)存在較豐富的邊緣，呈現(xiàn)出規(guī)則的紋理特征；車牌內(nèi)字符排列均勻，字符和牌照底色在灰度值上存在跳變，且字符本身與牌照底部灰度均勻；車牌內(nèi)字符間的間隔、字符大小和牌照大小有固定的比例；車牌的幾何特征：即車牌的高、寬和高寬比相對(duì)固定。根據(jù)這些特點(diǎn)，我們就可以更好的定位提取車牌。為了準(zhǔn)確、快速地定位車牌，人們提出了許多定位算法。其中大部分算法是根據(jù)車牌特征而設(shè)計(jì)的，目前所利用算法主要有直接法、基于多分辨率、基于顏色信息以及基于數(shù)學(xué)形態(tài)學(xué)的車牌定位方法。下面對(duì)這些算法逐一介紹。 直接車牌定位法大多是根據(jù)車牌的形狀、灰度分布特性等特點(diǎn)來檢測(cè)車牌。其中，頻率法是直接車牌定位法中的一個(gè)典型定位算法[19]。頻率法是一種基于字符和背景變化頻率的投影定位方法，它結(jié)合車牌的先驗(yàn)知識(shí)，在圖像中定位車牌。主要用到車牌以下的先驗(yàn)知識(shí)： (1)攝像機(jī)與汽車的距離基本固定，而實(shí)際車牌的大小又基本相同，所以在圖像中車牌的大小是一個(gè)特征量； (2)車牌有邊界，邊緣檢測(cè)時(shí)會(huì)有邊緣存在； (3)車牌中一般7個(gè)字符，筆劃存在邊緣；車牌的搜索方法如下： (1)對(duì)圖像作垂直投影，然后從下向上搜索投影值，因?yàn)閳D像中車牌以下部分的灰度值較低，且灰度分布相對(duì)均勻，經(jīng)過圖像增強(qiáng)和邊緣檢測(cè)后基本變?yōu)??？紤]到實(shí)時(shí)性的要求，搜索是跳躍前進(jìn)的；(2)當(dāng)搜索到的0，1變化頻率大于某一定值T，且跳躍距離(即兩個(gè)“0”或兩個(gè)“1”之間的距離)在規(guī)定的范圍內(nèi)，則可認(rèn)為可能找到車牌的下沿了，記下第一次搜索到“1”時(shí)的橫坐標(biāo)和該行縱坐標(biāo)。此時(shí)，步進(jìn)值改為1，以便實(shí)現(xiàn)精確搜索； (3)繼續(xù)搜索上邊各行，檢查是否也滿足投影值大于T的條件，直到找不到滿足條件的行，就認(rèn)為可能是車牌的上邊沿，記下它的下一行的最后搜索到“1”的橫坐標(biāo)和該行縱坐標(biāo)； (4)計(jì)算該可能車牌的高：，再計(jì)算其寬度:，得出其寬高比，若R局限于3的一個(gè)領(lǐng)域內(nèi)，則表明找到了車牌，否則繼續(xù)搜索； (5)根據(jù)上述步驟完成定位，分割出車牌。 實(shí)驗(yàn)中定值T取為13，因?yàn)榕普罩?個(gè)字符(不包括“”)，左右邊緣至少應(yīng)該有7*2=14個(gè)，邊緣檢測(cè)后每行應(yīng)該至少有13次“0”到“1”的變化。 頻率提取法簡(jiǎn)單實(shí)用，在干擾少的情形下車牌定位效果較好，對(duì)牌照所占比例較大，背景干擾較小的情況比較合適，一般和其它方法結(jié)合使用會(huì)更好。 多分辨率車牌定位法所謂多分辨率定位法，就是在低分辨率的圖像上大致確定出牌照的位置，然后在高分辨的圖像上做出精確的定位，這樣可以有效地減少計(jì)算量。汽車本身具有一定的特點(diǎn)，在一般情況下，牌照都掛在緩沖器上或附近。只要確定緩沖器的位置，就能得到牌照的大致位置。本算法中輸入圖像為未進(jìn)行邊緣檢測(cè)的灰度圖像[20]。具體的算法如下：(1)將輸入圖像分成一系列大小相同的子圖像，每個(gè)子圖像的灰度均值為： (31)其中，為子圖像中心坐標(biāo)。這樣就把高分辨率圖像變換成為低分辨率子圖像，轉(zhuǎn)換為低分辨率圖像的目的是為了提高處理速度； (2)對(duì)低分辨率圖像，將其象素沿水平方向累加，得到一個(gè)投影； (3)由于汽車的緩沖器位于車輪上方，由于光線的照射，無論是直射光，還是散射光，緩沖器至車輪底部這部分的平均灰度比緩沖器至緩沖器以上部分的平均灰度要暗一些。這樣，就會(huì)在圖像中呈現(xiàn)出一條明顯的邊界，在投影表中反映為陡變的邊沿。因此，只要能從表中找到這樣一個(gè)邊沿，便可定出緩沖器的位置；(4)程序中自下而上檢測(cè)投影表的波峰和波谷。當(dāng)波峰和波谷第一次滿足式(32)時(shí)，則認(rèn)為檢測(cè)到了緩沖器的位置，從而可以間接定位車牌。 (32) 最初形態(tài)學(xué)是生物學(xué)中研究動(dòng)物和植物的一個(gè)分支，后來也用數(shù)學(xué)形態(tài)學(xué)來表示以形態(tài)為基礎(chǔ)的圖像分析數(shù)學(xué)工具。形態(tài)學(xué)的基本思想是使用具有一定形態(tài)的結(jié)構(gòu)元素來量和提取圖像中的對(duì)應(yīng)形狀，從而達(dá)到對(duì)圖像進(jìn)行分析和識(shí)別的目的。數(shù)學(xué)形態(tài)學(xué)可以用來簡(jiǎn)化圖像數(shù)據(jù)，保持圖像的基本形狀特性，同時(shí)去掉圖像中與研究目的的無關(guān)的部分。使用形態(tài)學(xué)操作可以完成增強(qiáng)對(duì)比度、消除噪聲、細(xì)化、填充和分割等常用圖像處理任務(wù)[21]。 數(shù)學(xué)形態(tài)學(xué)的基礎(chǔ)和使用的語言是集合論，其基本運(yùn)算的四種：膨脹( Dilaition)、腐蝕(Erosion)、開啟(Open)和閉合(Close)基于這些基本運(yùn)算還可以推導(dǎo)和組成各種數(shù)學(xué)形態(tài)學(xué)運(yùn)算方法。其運(yùn)算對(duì)象是集合，通常給出一個(gè)圖像集合和一個(gè)結(jié)構(gòu)元素集合，利用結(jié)構(gòu)元素對(duì)圖像進(jìn)行操作。結(jié)構(gòu)元素是一個(gè)用來定義形態(tài)操作中所用到的領(lǐng)域的形狀和大小的矩陣，可以具有任意的大小和維數(shù)。 數(shù)學(xué)形態(tài)學(xué)基本運(yùn)算(1)膨脹膨脹的運(yùn)算符為“” ，圖像集合A用結(jié)構(gòu)元素B來膨脹，記作AB，其定義為： (33)其中，表示B的映像，即與B關(guān)于原點(diǎn)對(duì)稱的集合。式(33)表明，用B對(duì)A進(jìn)行膨脹的過程是這樣的：首先對(duì)B作關(guān)于原點(diǎn)的映射，再將其映像平移x，當(dāng)A與B映像的交集不為空集時(shí)，B的原點(diǎn)就是膨脹集合的像素。也就是說，用B來膨脹A得到的集合是B的位移與A至少有一個(gè)非零元素相交時(shí)B的原點(diǎn)的位置的集合。膨脹的作用效果如圖32所示。其中白色表示目標(biāo)，背景為黑色，結(jié)構(gòu)元素為5X5正方形對(duì)象。膨脹前 膨脹后圖32 圖像膨脹前后比較(2)腐蝕腐蝕的運(yùn)算符是“” ，圖像集合A用結(jié)構(gòu)元素B來腐蝕記作，其定義為： (34)式(34)表明，A用B來腐蝕的結(jié)果是所有滿足將B平移x后，B仍全部包含在A中的集合，從直觀上看就是B平移后全部包含在A中的原點(diǎn)組成的集合。 膨脹與腐蝕的結(jié)構(gòu)與原點(diǎn)的位置有關(guān)。 膨脹和腐蝕具有對(duì)偶關(guān)系，即： (35) (36) 其中、分別表示A、B的補(bǔ)集。腐蝕的操作效果如圖33所示，其中白色為目標(biāo)，黑色為背景，結(jié)構(gòu)元素為5x5正方形對(duì)象。腐蝕前 腐蝕后圖33 腐蝕前后比較(3)開啟開啟運(yùn)算符為“” ，A用B來開啟記為A B，其定義如下： (37)(4)閉合閉合的運(yùn)算符為“” ，A用B來閉合記為AB，其定義如下： (38)開啟和閉合運(yùn)算不受原點(diǎn)位置的影響，無論原點(diǎn)是否包含在結(jié)構(gòu)元素中，開啟和閉合的結(jié)果都是一樣的。開啟和閉合運(yùn)算也具對(duì)偶性，即： (39) (310)（3）基于數(shù)學(xué)形態(tài)學(xué)的車牌定位 數(shù)學(xué)形態(tài)學(xué)中的開閉運(yùn)算具有以下特點(diǎn)： (1)開運(yùn)算可以擦除圖像中的像素。從而能夠去除孤立的小點(diǎn)、毛刺和小橋(即連通兩塊域的小點(diǎn))，而保持總的位置和形狀不變。 (2)閉運(yùn)算可以使圖像中的像素粘連。這一特點(diǎn)可用于填平小湖(即小孔)，彌合小裂縫，而保持總的位置和形狀不變。 基于數(shù)學(xué)形態(tài)學(xué)的車牌定位算法就是利用開啟和閉合這兩種運(yùn)算在圖像中進(jìn)行定位的。其實(shí)現(xiàn)方法即為利用數(shù)學(xué)形態(tài)中的開運(yùn)算與閉運(yùn)算來對(duì)圖像進(jìn)行處理，得到多個(gè)車牌可能區(qū)域，然后在處理后的圖像中用多區(qū)域判別法在圖像的多個(gè)車牌可能區(qū)域中找到車牌的正確的位置。 在此算法中結(jié)構(gòu)元素的大小的選取至關(guān)重要。結(jié)構(gòu)元素過大，會(huì)使非車牌區(qū)域的邊緣點(diǎn)粘連在一起，可能的車牌區(qū)域增多，給隨后的多區(qū)域判別算法帶來困難。而若結(jié)構(gòu)元素過小，則會(huì)使車牌區(qū)域無法粘連在一起，就有可能使真正的車牌區(qū)域不包含在可能的車牌區(qū)域集合中。 這種方法最大的優(yōu)點(diǎn)是計(jì)算速度快，算法相對(duì)簡(jiǎn)單，缺點(diǎn)是要求邊緣比較清晰，容易受到那些紋理分布同樣比較豐富的非車牌區(qū)域的影響，定位不夠精確。第4 章 車牌圖像的邊緣檢測(cè)邊緣檢測(cè)是所有基于邊界的分割方法的第一步。兩個(gè)具有不同灰度值的相鄰區(qū)域之間總存在著邊緣，物體的邊緣是以圖像局部特性的不連續(xù)性的形式出現(xiàn)的，例如：灰度值的突變，顏色的突變，紋理結(jié)構(gòu)的突變等。而在景物成像的過程中，受多種因素的影響，圖像質(zhì)量都會(huì)有所下降，這種圖像質(zhì)量下降的過程稱為圖像的退化。同樣，在車牌識(shí)別系統(tǒng)中，由于自然光照度的變化、車輛自身的運(yùn)動(dòng)，采集圖像設(shè)備本身的因素等，都會(huì)引起牌照?qǐng)D像的退化，導(dǎo)致對(duì)車牌信息的提取干擾很大。所以為了改善退化了的牌照?qǐng)D像質(zhì)量，必須對(duì)圖像進(jìn)行預(yù)處理。對(duì)圖像進(jìn)行預(yù)處理，主要包括圖像的灰度化、二值化、圖像的邊緣檢測(cè)等。 車牌圖像的灰度化和二值化 圖像的灰度化 顏色圖像可分為黑白色、灰度色和彩色。工程應(yīng)用中經(jīng)常要遇到需要把彩色圖像向灰度圖像轉(zhuǎn)化的問題，用數(shù)碼相機(jī)采集過來的汽車圖像是彩色圖像，為加快處理速度，需要把彩色圖像轉(zhuǎn)化為灰度圖像。由彩色圖像轉(zhuǎn)化為灰度圖像的過程叫灰度化處理，它是使RGB模型中的R=B=G。灰度化處理就是把含有亮度和色彩的彩色圖像變換成灰度圖像的過程。 一般情況下彩色圖像每個(gè)像素用3個(gè)字節(jié)表示，每個(gè)字節(jié)對(duì)應(yīng)著R，G，B分量的亮度(紅、綠、藍(lán))，轉(zhuǎn)換后的灰度圖像的一個(gè)像素用一個(gè)字節(jié)來表示該點(diǎn)的灰度值，它的值在0255 之間，數(shù)值越大，該點(diǎn)就越白，即越亮，越小則越黑?？梢?，經(jīng)過這樣轉(zhuǎn)換減少了計(jì)算量。轉(zhuǎn)換關(guān)系是： (41)其中為轉(zhuǎn)換后的灰度圖像在點(diǎn)的灰度值，該式綠色的比重比較大，所以轉(zhuǎn)換時(shí)可直接用G值作為轉(zhuǎn)換后的灰度。轉(zhuǎn)換結(jié)果如圖41所示。(a)原彩色圖 (b)轉(zhuǎn)換后的灰度圖圖41 彩色圖像的灰度化處理灰度圖只能表現(xiàn)256種顏色，灰度化處理還有其他方法，如：取3個(gè)分量的最大值、最小值、算術(shù)平均值等，目的都是使顏色的R，G，B分量值相等。我們采用經(jīng)驗(yàn)公式：作為灰度值?；叶忍幚硐茸x入圖像的拷貝文件到內(nèi)存中，使顏色的分量值都相等且等于，這樣就可以使圖像變成灰度圖像。 圖像二值化 二值圖像是指整幅圖像內(nèi)僅有黑、白二值的圖像，在他們之間不存在其他灰度層次的變化。在邊緣檢測(cè)技術(shù)在汽車牌照自動(dòng)識(shí)別監(jiān)控系統(tǒng)的應(yīng)用的研究過程中，對(duì)圖像的二值化是非常關(guān)鍵的一步，二值化的效果直接影響到后面的車牌定位以及字符分割，因?yàn)檐嚺贫ㄎ缓妥址指疃际腔谲嚺茀^(qū)域的二值化結(jié)果進(jìn)行的。二值化算法又稱為閾值算法，其目的就是找出一個(gè)合適的閾值，將待研究的車牌區(qū)域劃分為前景和背景兩部分。二值化后的車牌要能再現(xiàn)原字符圖像，基本不出現(xiàn)筆畫斷裂和粘連現(xiàn)象，盡量不丟失原字符的特征。另外二值化算法還可以用于車牌定位過程中精確定位車牌的上下左右邊界。為此，必須對(duì)二值化算法做深入細(xì)致的研究。 目前，常用的二值化算法主要有基于灰度的二值化和基于彩色的二值化，其中基于灰度的二值化又包括多種算法，主要有全局動(dòng)態(tài)二值化和局部自適應(yīng)二值化等；基于彩色的二值化主要有基于HSV空間的彩色二值化。本文首先提取了有關(guān)色彩的信息，然后和絕大多數(shù)算法一樣，對(duì)灰度圖像進(jìn)行二值化處理。圖像二值化的關(guān)鍵在于閾值T的選取，根據(jù)閾值T來區(qū)分圖像中的對(duì)象和背景。設(shè)原始灰度圖像為,變換過后的二值圖像為，則二值化的過程表示為： (42)根據(jù)閾值選取情況，又分為全局閾值、局部閾值和動(dòng)態(tài)閾值[22]。全局閾值法根據(jù)圖像的直方圖或灰度空間分布確定一個(gè)閾值，以此實(shí)現(xiàn)灰度圖像到二值圖像的轉(zhuǎn)化。典型的全局閾值法包括Qstu方法[23]，最大熵方法等。全局閾值算法簡(jiǎn)單，對(duì)于目標(biāo)和背景明顯分離、直方圖分布呈雙峰的圖像效果良好，但對(duì)那些由于光照不均勻、噪聲干擾較大等原因使直方圖分布不呈雙峰的圖像，二值化效果明顯變差；局部閾值法通過定義考察點(diǎn)的領(lǐng)域，并由領(lǐng)域計(jì)算模板，實(shí)現(xiàn)考察點(diǎn)灰度與領(lǐng)域點(diǎn)的比較。非均勻光照條件等情況雖然影響整體圖像的灰度分布，但是對(duì)局部圖像的性質(zhì)卻沒有什么影響，從而局部閾值法比全局閾值法有更廣泛的應(yīng)用，比如Bernsen算法[24]就是一種典型的局部閾值法。根據(jù)上述兩種方法的優(yōu)缺點(diǎn)，把他們有效的結(jié)合起來使用是一種不錯(cuò)的方法。此外，還有一種動(dòng)態(tài)閾值法，這是一種自適應(yīng)的二值化方法，它利用的是像素自身及其領(lǐng)域灰度變化的特征。由于此算法充分考慮了每個(gè)像素領(lǐng)域的特征，所以能夠更好的突出背景和目標(biāo)的邊界。 灰度變換增強(qiáng) 由于車牌圖像在拍攝時(shí)受各種各樣條件的限制和干擾，圖像的灰度值往往與實(shí)際景物不完全匹配。一般成像系統(tǒng)只具有一定的亮度范圍，亮度的最大值和最小值之比稱為對(duì)比度。由于成像系統(tǒng)的亮度有限，常出現(xiàn)對(duì)比度不足的情況，使人眼觀看圖像時(shí)視覺效果很差，這將直接影響到圖像的后續(xù)處理。通過灰度變換可以增強(qiáng)對(duì)比度，改善視覺效果。 灰度變換如果造成對(duì)比度不足的原因主要是由于被拍攝目標(biāo)的遠(yuǎn)近不同，使得圖像中央?yún)^(qū)域和邊緣區(qū)域的灰度失衡，或是由于攝像頭在掃描時(shí)各點(diǎn)的靈敏度有較大的差異而產(chǎn)生圖像灰度失真，或是由于曝光不足或過度而使得圖像的灰度值被限制在一個(gè)很小的范圍。這時(shí)人們看到的將是一個(gè)模糊不清、似乎沒有灰度層次的圖像。可以