[發明專利]車牌識別方法、裝置及存儲介質

在審

• 申請號: 202011481790.1
• 申請日: 2020-12-14
• 公開（公告）號: CN112508018A
• 公開（公告）日: 2021-03-16
• 發明（設計）人: 王昊;申省梅;謝佩博
• 申請（專利權）人: 北京澎思科技有限公司
• 主分類號: G06K9/32
• 分類號: G06K9/32;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 北京超凡宏宇專利代理事務所(特殊普通合伙) 11463
• 代理人: 曹瑞敏

1.一種車牌識別方法，其特征在于，所述方法包括：

獲取待識別的包含車牌的目標圖像；

將所述目標圖像輸入目標卷積神經網絡中，得到所述目標圖像對應的特征圖，并根據所述特征圖得到初始特征序列；

將所述初始特征序列輸入編碼模塊，得到編碼后的中間特征序列；

將所述中間特征序列輸入解碼模塊，得到解碼后的目標特征序列；

根據所述目標特征序列得到所述目標圖像的識別結果，所述識別結果用于標識所述目標圖像中所包含的車牌的字符，

其中，所述編碼模塊和所述解碼模塊都是基于包括多頭注意力組件的變換器的，所述多頭注意力組件具有三個輸入變量：分別為：查詢、鍵和值。

2.根據權利要求1所述的方法，其特征在于，所述編碼模塊包括串聯連接的多個編碼器，并且每個編碼器包括變換器，每個編碼器用于獲取一個輸入序列并得到一個輸出序列，

其中，所述串聯連接的多個編碼器中的第一個編碼器的輸入序列是所述初始特征序列，所述串聯連接的多個編碼器中的其他編碼器的輸入序列是位于該編碼器之前的相鄰編碼器的輸出序列，所述串聯連接的多個編碼器中的最后一個編碼器的輸出序列為所述中間特征序列。

3.根據權利要求2所述的方法，其特征在于，對任一個編碼器而言，其獲取輸入序列，并得到將輸入到變換器的查詢、鍵和值，

其中，將輸入序列與二維位置編碼相加作為查詢，將輸入序列與二維位置編碼相加作為鍵，將輸入序列作為值。

4.根據權利要求1所述的方法，其特征在于，所述解碼模塊包括串聯連接的多個解碼器，并且每個解碼器包括變換器，每個解碼器用于獲取中間特征序列和輸入序列，并結合在訓練階段得到的目標查詢編碼得到輸出序列，

其中，所述串聯連接的多個解碼器中的第一個解碼器的輸入序列是零序列，所述串聯連接的多個解碼器中的其他解碼器的輸入序列是位于該解碼器之前的相鄰解碼器的輸出序列，所述串聯連接的多個解碼器中的最后一個解碼器的輸出序列為所述目標特征序列。

5.根據權利要求4所述的方法，其特征在于，對任一個解碼器而言，其獲取中間特征序列、輸入序列、目標查詢編碼，并得到將輸入到變換器的查詢、鍵和值，

其中，將中間特征序列與二維位置編碼相加作為鍵，將中間特征序列作為值，將輸入序列與目標查詢編碼相加作為查詢。

6.根據權利要求3所述的方法，其特征在于，所述二維位置編碼是指：

針對序列先將特征維度0至E/2-1進行第一方向上的一維位置編碼，再將特征維度E/2至E-1進行第二方向上的一維位置編碼；

其中，第一方向是寬，第二方向是高，或者，第一方向是高，第二方向是寬，

其中，N為序列長度，E為特征維度。

7.根據權利要求1至6中任一項所述的方法，其特征在于，所述根據所述目標特征序列得到所述目標圖像的識別結果，所述識別結果用于標識所述目標圖像中所包含的車牌的字符，包括：

對所述目標特征序列中的每個特征向量進行線性變換，得到所述目標圖像所包含的字符。

8.一種車牌識別裝置，其特征在于，所述裝置包括：

獲取模塊，用于獲取待識別的包含車牌的目標圖像；

第一處理模塊，用于將所述目標圖像輸入目標卷積神經網絡中，得到所述目標圖像對應的特征圖，并根據所述特征圖得到初始特征序列；

第二處理模塊，用于將所述初始特征序列輸入編碼模塊，得到編碼后的中間特征序列；

第三處理模塊，用于將所述中間特征序列輸入解碼模塊，得到解碼后的目標特征序列，其中，所述編碼模塊和所述解碼模塊都是基于包括多頭注意力組件的變換器的，所述多頭注意力組件具有三個輸入變量：分別為：查詢、鍵和值；

識別模塊，用于根據所述目標特征序列得到所述目標圖像的識別結果，所述識別結果用于標識所述目標圖像中所包含的車牌的字符。