[發明專利]雙行車牌的自動識別方法

有效

• 申請號: 202010114224.0
• 申請日: 2020-02-25
• 公開（公告）號: CN111353500B
• 公開（公告）日: 2023-07-28
• 發明（設計）人: 楊磊;邱國慶;魏敦楷
• 申請（專利權）人: 上海其高電子科技有限公司
• 主分類號: G06V30/148
• 分類號: G06V30/148;G06V10/774;G06V10/82;G06N3/0464
• 代理公司: 上海交達專利事務所 31201
• 代理人: 王毓理;王錫麟

1.一種雙行車牌的自動識別方法，其特征在于，通過對待測圖像進行預處理后輸入經過訓練的用于雙行車牌分類的車牌檢測分類器和雙行車牌端到端識別器，識別得到候選車牌號；然后利用車牌類別及對應編碼規則對候選車牌號進行復核，實現雙行車牌識別；

所述的雙行車牌端到端識別器包括兩個神經網絡分支，每個神經網絡分支包括依次設置的第一卷積層、第一池化層、第二卷積層、第二池化層、第三卷積層、第四卷積層、第三池化層、第五卷積層、第六卷積層、第四池化層、第七卷積層，兩個神經網絡分支的輸出端通過softmax層輸出車牌及置信度信息；

所述的預處理是指：根據實際情況，預設相應的轉角和行切割線范圍，對待測圖像進行自動旋轉、裁剪，得到包含一組包含兩行車牌的圖像；

所述的雙行車牌端到端識別器，分為訓練階段和識別階段，其中：每個神經網絡分支的訓練通過對灰度化后的單行車牌進行特征提取，將得到的特征序列信息采用雙向LSTM進行序列分類，再通過CTC損失函數對分類信息對齊，得到車牌及置信度信息得以實現；雙行車牌端到端識別器的識別階段通過對待測雙行車牌進行預處理后進行特征提取，再將上下兩行車牌的特征序列信息左右拼接，采用雙向LSTM進行序列分類，再通過CTC損失函數對分類信息對齊，得到車牌號及置信度信息，通過softmax層合并一組車牌號及置信度信息相連并傳輸最終識別的車牌號及置信度信息；

所述的候選車牌號，通過將預處理后的兩行車牌圖像分別輸入端到端識別器兩個神經網絡分支對分割后的上下兩行車牌分別進行特征提取，各自得到512通道的32×1的特征序列，再通過softmax層按照左右順序將序列特征拼接，得到514×64×1的特征序列，進一步通過序列分類和識別，得到若干車牌號及其對應置信度和雙行車牌對應的旋轉校正角和上下切割線，以置信度最大的車牌號作為候選車牌號；

所述的旋轉校正角θ_i∈(-30°,30°)，步長為3°，行切割線范圍為h_j∈(0.2H,0.8H)，步長為0.1H；

所述的旋轉校正角和上下切割線，通過以下方式設置：

步驟3.1)按照旋轉雙行車牌圖像；

步驟3.2)根據行切割線h_j的范圍將雙行車牌分割為上下兩行U_ij和D_ij，將U_ij和D_ij高度方向在保證單行車牌訓練時高度的前提下縮放到32，得到UR_ij和DR_ij；

步驟3.3)將上下兩行車牌UR_ij和DR_ij分別輸入雙行車牌檢測分類器，提取到尺寸為512×32×1的上、下特征序列Seq_up和Seq_down，將上、下特征序列Seq_up和Seq_down左右拼接得到尺寸為512×64×1的特征序列Seq；

步驟3.4)雙行車牌檢測分類器根據特征序列Seq識別出的車牌號Plate_ij及對應的字符置信度之和Conf_ij；

步驟3.5)循環旋轉校正角和行切割線并輸入雙行車牌端到端識別器中，得到車牌號和置信度的數組Plate_ij和Conf_ij，根據置信度最大索引，找到車牌號及置信度

當需要校正旋轉校正角和雙行車牌行切割線時，根據最大索引輸出得到對應的旋轉校正角和行分割線。