[發明專利]一種基于圖像的車頭朝向識別方法及裝置

有效

• 申請號: 201710458187.3
• 申請日: 2017-06-16
• 公開（公告）號: CN109145928B
• 公開（公告）日: 2020-10-27
• 發明（設計）人: 余聲
• 申請（專利權）人: 杭州海康威視數字技術股份有限公司
• 主分類號: G06K9/46
• 分類號: G06K9/46;G06K9/62;G06N3/08
• 代理公司: 北京柏杉松知識產權代理事務所(普通合伙) 11413
• 代理人: 馬敬;項京

1.一種基于圖像的車頭朝向識別方法，其特征在于，包括：

確定待識別圖像中是否包含符合車牌特征的區域；

若所述待識別圖像中包含符合車牌特征的區域，則確定所述待識別圖像中的至少一個整車圖像，每個整車圖像包含一個符合車牌特征的區域，且每個整車圖像是以一個符合車牌特征的區域為基準向各方向延伸預設距離后確定的；

在每個整車圖像中，根據符合車牌特征的區域確定車臉的各頂點所在區域；

將每個整車圖像輸入預設卷積神經網絡，將所述預設卷積神經網絡輸出的特征圖與所述車臉的各頂點所在區域進行處理，得到每個所述車臉的各頂點對應的定位區域；

在每個所述車臉的各頂點對應的定位區域中，找到每個所述車臉的各頂點對應的定位坐標，確定每個所述車臉所在區域；

對于每個整車圖像，根據所述預設卷積神經網絡輸出的特征圖與車臉所在區域對車臉所在區域進行分類，得到車臉所在區域對應的分類結果，所述分類表示每個整車圖像中的車頭朝向。

2.根據權利要求1所述的方法，其特征在于，所述確定待識別圖像中是否包含符合車牌特征的區域，包括：

逐行掃描待識別圖像，確定是否能夠獲取滿足預設車牌像素特征的像素點，若能，將所述滿足預設車牌像素特征的像素點作為第一像素點；

連接各行內相鄰的第一像素點，獲得各行的多個第一像素區域；

連接相鄰行的第一像素區域，獲得待識別圖像的多個第二像素區域；

從多個第二像素區域中，確定是否能夠獲得與預設車牌特征匹配的第二像素區域，所述預設車牌特征包括：車牌長度特征、車牌寬度特征、車牌顏色特征、車牌字符特征，若能，將與預設車牌特征匹配的第二像素區域作為符合車牌特征的區域。

3.根據權利要求1所述的方法，其特征在于，所述若所述待識別圖像中包含符合車牌特征的區域，則確定所述待識別圖像中的至少一個整車圖像，包括：

對于所述待識別圖像中的每個符合車牌特征的區域，獲得所述符合車牌特征的區域的各頂點坐標為車牌坐標；

根據所述車牌坐標獲得車牌中心點坐標及實際車牌寬度；

根據所述車牌中心點坐標、所述實際車牌寬度及預設上距離、預設下距離、預設左距離、預設右距離，獲得包含符合車牌特征的區域的整車圖像的頂點坐標；

根據所述整車圖像的頂點坐標，在所述待識別圖像中截取整車圖像。

4.根據權利要求1所述的方法，其特征在于，所述在每個整車圖像中，根據符合車牌特征的區域確定車臉的各頂點所在區域，包括：

在每個整車圖像中，將所述車牌坐標對應的矩陣，與第一網絡中全連接層FC-4的權矩陣相乘，獲得車臉各頂點的粗定位坐標；

將所述車臉各頂點的粗定位坐標，向二維空間四個方向擴展預設像素值，獲得每個整車圖像中，車臉各頂點坐標在整車圖像中的坐標范圍為車臉的各頂點所在區域。

5.根據權利要求1所述的方法，其特征在于，所述將每個整車圖像輸入預設卷積神經網絡，將所述預設卷積神經網絡輸出的特征圖與所述車臉的各頂點所在區域進行處理，得到每個所述車臉的各頂點對應的定位區域，包括：

對于每個整車圖像，將整車圖像輸入預設卷積神經網絡，獲得整車圖像的特征圖；

將所述整車圖像的尺寸、所述整車圖像的特征圖的尺寸、所述車臉各頂點坐標在整車圖像中的坐標范圍，處理獲得車臉各頂點坐標在整車圖像中的坐標范圍對應在整車圖像的特征圖中的坐標范圍；

將所述車臉各頂點坐標在整車圖像中的坐標范圍，對應在整車圖像的特征圖中的坐標范圍，縮放至預設尺寸，將預設尺寸內的區域作為車臉的各頂點對應的定位區域。

6.根據權利要求5所述的方法，其特征在于，所述在每個所述車臉的各頂點對應的定位區域中，找到每個所述車臉的各頂點對應的定位坐標，確定每個所述車臉所在區域，包括：

對于每個車臉，將車臉的各頂點對應的定位區域對應的特征矩陣，與預設卷積神經網絡中全連接層FC-1的權矩陣相乘，獲得車臉的各頂點對應的定位坐標；

根據所述車臉的各頂點對應的定位坐標，確定車臉所在區域。