[發(fā)明專利]一種圖像識別的方法及設(shè)備

在審

• 申請?zhí)枺?/td>: 202210614363.9
• 申請日: 2022-05-31
• 公開（公告）號: CN115019293A
• 公開（公告）日: 2022-09-06
• 發(fā)明（設(shè)計）人: 朱亞倫;沈孔懷
• 申請（專利權(quán)）人: 浙江大華技術(shù)股份有限公司
• 主分類號: G06V20/62
• 分類號: G06V20/62;G06V10/56;G06V10/44;G06V10/82;G06V10/764;G06V30/244;G06V30/19;G06V20/70;G06N3/04;G06N3/08
• 代理公司: 北京同達(dá)信恒知識產(chǎn)權(quán)代理有限公司 11291
• 代理人: 趙凱莉

本發(fā)明公開了一種圖像識別的方法及設(shè)備，用于實現(xiàn)一種更加通用的車牌識別方法，在支持國標(biāo)車牌基礎(chǔ)上支持識別各種定制車牌，減少開發(fā)工作量和開發(fā)周期。該方法包括：確定待識別的圖像和所述圖像中對象的外部特征；將所述圖像輸入到訓(xùn)練好的識別模型中，利用主干網(wǎng)絡(luò)提取所述圖像的特征得到特征圖，將所述特征圖分別輸入到第一分支網(wǎng)絡(luò)和第二分支網(wǎng)絡(luò)，對應(yīng)輸出第一預(yù)測結(jié)果和第二預(yù)測結(jié)果；其中所述識別模型包括所述主干網(wǎng)絡(luò)、所述第一分支網(wǎng)絡(luò)和所述第二分支網(wǎng)絡(luò)；根據(jù)所述對象的外部特征、所述第一預(yù)測結(jié)果和第二預(yù)測結(jié)果，確定所述對象的識別結(jié)果。

技術(shù)領(lǐng)域

本發(fā)明涉及圖像識別技術(shù)領(lǐng)域，特別涉及一種圖像識別的方法及設(shè)備。

背景技術(shù)

國標(biāo)機動車車牌包括藍(lán)牌，新能源，黃牌等，車牌字符格式比較統(tǒng)一，一般為省份簡稱+字母+字母或數(shù)字，長度為7位或8位，車牌全部使用字符個數(shù)不超過幾十種，目前國標(biāo)機動車車牌識別方案已經(jīng)比較成熟，識別率較高。

但在一些工廠或園區(qū)，為方便內(nèi)部車輛管理，內(nèi)部車輛一般會懸掛特殊的定制車牌，很多定制車牌通常會存在新的字符，且新的字符并不在國標(biāo)車牌的字符庫中，針對這種定制車牌，需要搜集大量圖像進行訓(xùn)練，重新優(yōu)化針對定制車牌的識別算法，開發(fā)周期較長，消耗人力物力。

發(fā)明內(nèi)容

本發(fā)明提供一種圖像識別的方法及設(shè)備，用于實現(xiàn)一種更加通用的車牌識別方法，在支持國標(biāo)車牌基礎(chǔ)上支持識別各種定制車牌，減少開發(fā)工作量和開發(fā)周期。

第一方面，本發(fā)明實施例提供的一種圖像識別的方法，該方法包括：

確定待識別的圖像和所述圖像中對象的外部特征；

將所述圖像輸入到訓(xùn)練好的識別模型中，利用主干網(wǎng)絡(luò)提取所述圖像的特征得到特征圖，將所述特征圖分別輸入到第一分支網(wǎng)絡(luò)和第二分支網(wǎng)絡(luò)，對應(yīng)輸出第一預(yù)測結(jié)果和第二預(yù)測結(jié)果；其中所述識別模型包括所述主干網(wǎng)絡(luò)、所述第一分支網(wǎng)絡(luò)和所述第二分支網(wǎng)絡(luò)；

根據(jù)所述對象的外部特征、所述第一預(yù)測結(jié)果和第二預(yù)測結(jié)果，確定所述對象的識別結(jié)果。

本實施例提供的通用圖像識別方法能夠保證識別的準(zhǔn)確率的同時，采用多任務(wù)方式，使用更低的計算力實現(xiàn)國標(biāo)車牌和其他定制車牌的識別。

作為一種可選的實施方式，通過如下方式確定所述識別模型訓(xùn)練完成：

獲取標(biāo)注的第一訓(xùn)練集和標(biāo)注的第二訓(xùn)練集；

將所述第一訓(xùn)練集經(jīng)過主干網(wǎng)絡(luò)輸入到第一分支網(wǎng)絡(luò)，計算第一損失值，以及將所述第二訓(xùn)練集經(jīng)過主干網(wǎng)絡(luò)輸入到第二分支網(wǎng)絡(luò)，計算第二損失值；

分別利用所述第一損失值和所述第二損失值，對所述識別模型進行交替訓(xùn)練，當(dāng)所述第一損失值和所述第二損失值都滿足預(yù)設(shè)條件時，確定所述識別模型訓(xùn)練完成。

作為一種可選的實施方式，通過如下方式確定所述第二訓(xùn)練集：

獲取標(biāo)注的真實圖像，利用生成的至少一個第一字符，對所述真實圖像中的至少一個第二字符進行替換，得到合成圖像；

根據(jù)進行替換的至少一個第一字符標(biāo)注的標(biāo)簽，對所述合成圖像進行標(biāo)注；

根據(jù)標(biāo)注的合成圖像，確定第二訓(xùn)練集。

本實施例通過生成合成圖像的方式，能夠減少人工標(biāo)注的成本，更加便捷地生成大量的合成圖像用于訓(xùn)練。

作為一種可選的實施方式，所述根據(jù)所述對象的外部特征、所述第一預(yù)測結(jié)果和第二預(yù)測結(jié)果，確定所述對象的識別結(jié)果，包括：

當(dāng)所述對象的外部特征滿足第一預(yù)設(shè)特征時，根據(jù)所述第一預(yù)測結(jié)果確定所述對象的識別結(jié)果，其中所述第一預(yù)設(shè)特征是根據(jù)所述第一訓(xùn)練集的圖像中對象的外部特征確定的；或，