【文章內(nèi)容簡介】 景顏色的亮度相差很大：要么亮度高于背景顏色的亮度藍底白字白框線、 黑底白字白框線、黑底紅字紅框線；要么字符顏色低于背景顏色亮度（黃底黑字黑框線），對于這種車牌，其二值化結(jié)果顏色相反，前景字符為黑色，背景為白色，需要進行處理； 牌照上的文字由 7個字符和一個分隔符橫向水平排列組成，字符高度為 90mm，寬度為 45mm，分割符的直徑為 10mm（實際上，每個字符是劇中分布在一個高位 90mm，寬為 45mm的矩形區(qū)域）。 字符和字符之間或字符和分割符之間的距離為 12mm； 使館牌照的間隔符在第 4和第 5個字符之間，其余的車牌的間隔符在第 2個和第 3個字符之間。由于使館牌照出現(xiàn)的概率很小，將 之視為小型車牌照一種變形情況，不單獨處理，后面提出的車牌格式均值后一種格式情況； 從左到右，車牌中每一位的可能字符如下：第 1位， 30個省份的簡稱字，共有 31個字符（暫時不考慮軍警車）；第 2位，除去字母“ I”之外的 25個英文大寫字母；第 3位， 黃河科技學院畢業(yè)論文 第 9 頁 除去字母“ I”和字母“ O”之外的 24個英文大寫字母和 10個數(shù)字，共有 34個字符；第 4~6位， 10個數(shù)字字符；第 7位， 10個數(shù)字字符，字符總數(shù)共有 70個。這是我國目前大多數(shù)汽車車牌的特征。 觀測和分析車牌外形特點，無論哪種車牌，外輪廓都有一個寬度不大的輪廓線，輪廓線的顏色和 字符顏色一致，與背景的亮度差異很大?，F(xiàn)實環(huán)境下，車牌有時安裝后，車輛廠商的商標會遮擋牌照外輪廓線，但商標本身又是一個輪廓線，其亮度與背景的亮度差異也很大，同樣可以利用之。首先，結(jié)合車牌分析結(jié)論，利用其中的特征 6點可以構(gòu)造牌照字符的格式模型，這個模型在其后的用來指導牌照定位后、字符識別前的字符分割。結(jié)合 GA3692標準，牌照圖像的實際大小可能隨著 CCD攝像頭采集的時機不同而產(chǎn)生一定的縮放，但是總體比例不會發(fā)生大的變化。設第 1個字符中心和第 2個字符的中心間距為一個長度單位，以第 1個字符中心為原點，那么 非使館車牌的其余字符中心的橫向位置應分別為： 1， ， ， ， ，字符的寬度同樣為 。其次，利用分析結(jié)論 7，可以利用字符在牌照的排列縮小候選字符的集合規(guī)模，加快識別速度或進行識別后結(jié)果的糾正判別。如果不知道字符在牌照中的排列位置，那么每個位置的候選字符可以達到 70個，如果知道了它的位置，那么該位置的候選字符至多有 34個，尤其是對牌照的第 6位，候選字符只有 10個數(shù)字。 車牌號碼定位 牌照的定位和分割是牌照識別系統(tǒng)的關(guān)鍵技術(shù)之一，其主要目的是在經(jīng)圖像預處 理后的原始灰度圖像中確定牌照的具體位置，并將包含牌照字符的一塊子圖像從整個圖像中分割出來，供字符識別子系統(tǒng)識別之用，分割的準確與否直接關(guān)系到整個牌照字符識別系統(tǒng)的識別率。由于牌照圖像在原始圖像中是很有特征的一個子區(qū)域，確切說是水平度較高的橫向近似的長方形，它在原始圖像中的相對位置比較集中，而且其灰度值與周邊區(qū)域有明顯的不同，因而在其邊緣形成了灰度突變 [10]的邊界，這樣就便于通過邊緣檢測來對圖像進行分割。其分割流程圖如圖 。 對 圖 像 進行 腐 蝕完 成 車 牌定 位去 雜 質(zhì)尋 找 X 方 向 和 Y 方向 方 向 的 車 牌 區(qū) 域 圖 牌照定位與分割流程圖 牌照圖像經(jīng)過了以上的處理后，牌照區(qū)域已 經(jīng)十分明顯，而且其邊緣得到了勾勒和 黃河科技學院畢業(yè)論文 第 10 頁 加強。但是車牌邊緣并不是連續(xù)的，不利于根據(jù)其特征進行進一步的判斷。此時可進一步確定牌照在整幅圖像中的準確位置。這里選用的是數(shù)學形態(tài)學的方法，其基本思想是用具有一定形態(tài)的機構(gòu)元素去量度和提取圖像中的對應形狀以達到對圖像分析和識別的目的。數(shù)學形態(tài)學的應用可以簡化圖像數(shù)據(jù) [11]，保持它們基本的形態(tài)特征，并除去不相干的結(jié)構(gòu)。在本程序中用到了膨脹和閉合這兩個基本運算，最后還用了 bwareaopen來去除對象中不相干的小對象。 經(jīng)過上述方法分割出來的車牌圖像中存在目標物體、背景還有噪 聲，要想從圖像中直接提取出目標物體，最常用的方法就是設定一個閾值 T，用 T將圖像的數(shù)據(jù)分成兩部分：大于 T的像素群和小于 T的像素群，即對圖像二值化。圖像中對象物的形狀特征的主要信息，常?？梢詮亩祱D像中得到。二值圖像與灰度圖像相比，信息量大大減少，因而處理二值圖像的速度快，成本低，實用價值高。因此，在車牌字符切分前，首先對圖像進行二值化處理。均值濾波是典型的線性濾波算法，它是指在圖像上對目標像素給一個模板，該模板包括了其周圍的臨近像素。再用模板中的全體像素的平均值來代替原來像素值。 圖像的二值化處理就是將圖像上 的點的灰度值置為 0或 255，這樣處理后整個圖像呈現(xiàn)明顯的黑白效果 [12]，即將 256個亮度等級的灰度圖經(jīng)過合適的閾值選取，而獲得的二值化圖像仍然可以反映圖像整體和局部特征。 二值化處理后的圖像，其集合性質(zhì)只與像素值為 0或 255的點的位置有關(guān)，不再涉及像素的其他級值，處理過程簡單，且數(shù)據(jù)的處理和壓縮量小。為了得到理想的二值圖像，一般采用封閉、連通的邊界定義不交疊的區(qū)域。所有灰度大于或等于閾值的像素被判定為屬于特定物體，其灰度值為 255，否則，灰度值為 0，表示背景或者其他的物體區(qū)域。如果某圖像在內(nèi)部有均勻一致的 灰度值，并且處在一個具有其他等級灰度值的均勻背景下，利用閾值法就能得到較好的切分效果。如果物體同背景的差別難以用不同的灰度值表現(xiàn)（比如紋理不同），可以把這些差別特征轉(zhuǎn)換為灰度的差別，然后利用閾值法來切分該圖像。動態(tài)調(diào)節(jié)閾值來實現(xiàn)圖像的二值化可動態(tài)地觀察其切分圖像的具體結(jié)果。 牌照區(qū)域的分割 對車牌的分割可以有很多種方法，本程序是利用車牌的彩色信息的彩色分割方法。 黃河科技學院畢業(yè)論文 第 11 頁 根據(jù)車牌底色等有關(guān)的先驗知識，采用彩色像素點統(tǒng)計的方法分割出合理的車牌區(qū)域，確定車牌底色藍色 RGB對應的各自灰度范圍，然后行方向統(tǒng)計在此 顏色范圍內(nèi)的像素點數(shù)量，設定合理的閾值，確定車牌在行方向的合理區(qū)域。然后，在分割出的行區(qū)域內(nèi)，統(tǒng)計列方向藍色像素點的數(shù)量，最終確定完整的車牌區(qū)域。 國內(nèi)汽車牌照種類很多，為研究方便以常見的藍色車牌為例來說明。 2021 年頒布的車牌規(guī)范規(guī)定車牌總長 440mm，牌照中的 7個字符的實際總長為 409mm左右，寬140mm，每個字符 45mm寬， 90mm高，字符間距為 10mm ，其中第二個字符與第三個字符的間距較為特殊，為 ，最后一個字符與第一個字符距邊界 25mm。這樣，如果平均分配每個字符在牌照中占據(jù)的寬度 ，那么每個字符寬度為： width/7（ width為車牌圖像的寬度）。但是，實際上，第二個第三個字符之間存在一個黑點，牌照左右兩邊與圖像邊緣也都有一定的寬度，所以每個字符的寬度應該小于 width/7。考慮所有的情況，一般情況下最小的寬度為 width/9。因此，字符的寬度可以從 width/9到 width/7之間漸進的變化得到。 牌照字符分割 在車輛牌照準確定位后，本章主要是對車輛牌照識別中的字符切分算法進行研究，車牌字符切分的流程圖如圖 。 排 查 白 色 像 素 點 去 除圖 像 兩 邊 多 余 部 分歸 一 化 切 割 的 字 符 與模 板 字 符 進 行 匹 配根 據(jù) 圖 像 的 大 小 設置 閾 值 分 離 字 符切 割 圖 像 多余 的 部 分 圖 字符分割與歸一化流程圖 在汽車 牌照自動識別過程中，字符分割有承前啟后的作用。它在前期牌照定位的基礎上進行字符的分割，然后再利用分割的結(jié)果進行字符識別 [13]。字符識別的算法很多，因為車牌字符間間隔較大，不會出現(xiàn)字符粘連情況，所以此處采用的方法為尋找連續(xù)有文字的塊，若長度大于某閾值，則認為該塊有兩個字符組成，需要分割。 一般分割出來的字符要進行進一步的處理，以滿足下一步字符識別的需要。但是對于車牌的識別，并不需要太多的處理就已經(jīng)可以達到正確識別的目的。在此只進行了歸一化處理，然后進行后期處理。 完成牌照區(qū)域的定位后，再將牌照區(qū)域分割成單個 字符，然后進行識別。字符分割 黃河科技學院畢業(yè)論文 第 12 頁 一般采用垂直投影法。由于字符在垂直方向上的投影必然在字符間或字符內(nèi)的間隙處取得局部最小值的附近，并且這個位置應滿足牌照的字符書寫格式、字符、尺寸限制和一些其他條件。利用垂直投影法對復雜環(huán)境下的汽車圖像中的字符分割有較好的效果，其流程圖如 。 計 算 水 平 投 影進 行 水 平 教 正按 左 右 寬 度切 割 字 符去 掉 車 牌的 邊 框分 析 垂 直 投 影 找 到 每個 字 符 的 中 心 位 置 圖 牌照字符分割流程圖 車牌字符的識別 車牌字符識別方法 目前已經(jīng)提出的車牌字符識別 [14]的方法有以下幾種： （ 1）統(tǒng)計特征匹配法。統(tǒng)計特征匹配法的要點是先提取待識別模式的一組統(tǒng)計特征，然后按 照一定的準則所確定的決策函數(shù)進行分類判決。實際應用中，當字符出現(xiàn)字符模糊、筆畫融合，斷裂、部分缺失時，此方法效果不理想，魯棒性較差。 （ 2）神經(jīng)網(wǎng)絡字符識別算法。這種網(wǎng)絡互連較多，待處理信息量大，抗干擾性能好，識別率高，但是產(chǎn)生的網(wǎng)絡結(jié)構(gòu)比較復雜，輸入模式維數(shù)的增加可能導致網(wǎng)絡規(guī)模龐大。主要有兩種方法：一種方法是先對待識別字符進行特征提取，然后用所獲得的特征來訓練神經(jīng)網(wǎng)絡分類器。其中，字符特征的提取是研究的關(guān)鍵，特征參數(shù)過多會增加訓練時間，過少會引起判斷上的歧義。另一種方法是充分利用神經(jīng)網(wǎng)絡的特點，直接把待 處理圖像輸入網(wǎng)絡，由網(wǎng)絡自動實現(xiàn)特征提取直至識別。 （ 3）支持向量機模式識別算法。主要有兩種方法應用于字符識別：一種是先對待識別字符進行特征提取，然后用所獲得的特征來訓練 SVM分類器。另一種是直接將每個字符的整幅圖像作為一個樣本輸入，不需要進行特征提取，節(jié)省了識別時間。支持向量機是 Vapnik及其研究小組針對二類別的分類問題提出的一種分類技術(shù)，其基本思想是在樣本空間或特征空間，構(gòu)造出最優(yōu)平面使超平面與不同類樣本集之間的距離最大，從而達到最大的泛化能力。 （ 4）模板匹配字符識別算法。在實際應用中，為了提高正確率往往需要使用大的模板或多個模板進行匹配，處理時間則隨著模板的增大以及模板個數(shù)的增加而增加。模板匹配字符識別算法的實現(xiàn)方法是計算輸入模式與樣本之間的相似性，取相似性最大的 黃河科技學院畢業(yè)論文 第 13 頁 樣本為輸入模式所屬類別。該方法識別速度快，但是對噪點比較敏感。 這四種方法中，模板匹配是車牌字符識別最簡單的方法之一。雖然在通常情況下用于匹配的圖像各自的成像條件存在差異，產(chǎn)生較大的噪聲干擾，或像經(jīng)預處理和規(guī)格化處理后，使得像的灰度或像素點的位置發(fā)生改變，但是在實際設計模板的時候，是根據(jù)各區(qū)域形狀固有的特點，突出各類似區(qū)域之間的差別，并將容易由處理過程引起的噪聲和位移等因素都考慮進去，按照一些基于圖像不變特性所設計的特征量來構(gòu)建模板，就可以避免上述問題。神經(jīng)網(wǎng)絡字符識別算法是目前比較流行的算法，但是由于模板匹配簡單，所以在此次算法中選擇模版匹配算法。 模版匹配字符識別 模板匹配是圖像識別方法中最具代表性的基本方法之一，它是將從待識別的圖像或圖像區(qū)域 f(i,j)中提取的若干特征量與模板 T(i,j)相應的特征量逐個進行比較，計算它們之間規(guī)格化的互相關(guān)量，其中互相關(guān)量最大的一個就表示 期間相似程度最高，可將圖像歸于相應的類。 匹配時相似度函數(shù)定義為： ? ? ? ?? ? ? ? ? ?? ? ??? Mm Nn Mm Nn ijijMm Nn ij nmtnmtnmfnmfjiS 1 1 1 1 21 1 2 ),(),(),(2),(),( （ ） 其中， ),( jif 為待識別車牌字符圖像中像素點 ),( ji 的灰度值，這里的取值為 0或 1，),( jit 為 模板 字符圖像 中像素點 ),( ji 的灰度值，這里的取值為 0 或 1； M 和 N為模板字符點陣橫向和縱向包含的像素個數(shù)。 匹配的步驟 [15]為： （ 1）依次取出模板字符，將模板字符按照上、下、左、右四個方向，在周圍五個像素的范圍內(nèi)滑動，每次分別計算出相似度 S值，取其中 S的最大值作為字符與模板字符之間的相似度函數(shù)。 （ 2）依次從待識別的字符與模板字符的相似度中找出最大相似度所對應的模板字符，判斷是否大于該字符的閾值 T，如果 S大于 T，那么待識別的字符的匹配 結(jié)果就是該模板字符，反之，如果 S小于 T，表示不匹配，則需要重新檢測。也可以計算圖像與模板特征量之間的距離，用最小距離法判定所屬類。模板匹配字符識別的流程圖如圖 。 黃河科技學院畢業(yè)論文 第 14 頁 此處采用相減的方法來求得字符與模板中哪一個字符最相似，然后找到相似度最大的輸出。汽車牌照的字符一般有七個， 我國 車牌第一位是漢字，緊接其后的為字母與數(shù)字。車牌字符識別與一般文字識別在于它的字符數(shù)有限，漢字共約 50多個，大寫英文字母 26個，數(shù)字 10個。為了實驗方便，結(jié)合本次設計所選汽車牌照的特點，只建立了 4個數(shù)字 26個字母與 10個數(shù)字的模板。 其他模板設計的方法與此相同。首先取字符模板，接著依次取待識別字符與模板進行匹配，將其與模板字符相減，得到的 0越多那么就越匹配。把每一幅相減后 差值最小的