[發(fā)明專利]基于深度學(xué)習(xí)的身份證自動識別方法及系統(tǒng)

在審

• 申請?zhí)枺?/td>: 201910406426.X
• 申請日: 2019-05-16
• 公開（公告）號: CN110135346A
• 公開（公告）日: 2019-08-16
• 發(fā)明（設(shè)計）人: 劉新宇;楊新永;嚴(yán)博宇;涂天牧;黃鴻康;趙寒楓
• 申請（專利權(quán)）人: 深圳市信聯(lián)征信有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/32
• 代理公司: 深圳市精英專利事務(wù)所 44242
• 代理人: 任哲夫

本發(fā)明公開一種基于深度學(xué)習(xí)的身份證自動識別方法及系統(tǒng)，其中，該方法，包括：在獲取到輸入圖片時，利用第一個全卷積神經(jīng)網(wǎng)絡(luò)對于輸入的身份證圖片進(jìn)行人臉和國徽的特征檢測，得到圖片的旋轉(zhuǎn)信息，并矯正；利用第二個全卷積神經(jīng)網(wǎng)絡(luò)對旋轉(zhuǎn)后的圖片進(jìn)行文字檢測，得到真實文字所在區(qū)域的多個文字框；對文字框進(jìn)行傾斜矯正，以將多個文字框的角度調(diào)整呈水平方向；計算所有水平方向的文字框中相鄰文字框之間的交并比，以使處于同一行的多個文字框連接；利用第三個全卷積神經(jīng)網(wǎng)絡(luò)對連接后的文字框進(jìn)行文字識別，以識別的連接后的文字框中的字符。本發(fā)明的技術(shù)方案能夠自動識別身份證信息，并且能夠提高身份證識別的準(zhǔn)確率，具有較佳的容差性。

技術(shù)領(lǐng)域

本發(fā)明涉及信息處理領(lǐng)域，尤其涉及一種基于深度學(xué)習(xí)的身份證自動識別方法、系統(tǒng)、計算機(jī)設(shè)備及存儲介質(zhì)。

背景技術(shù)

目前，現(xiàn)有身份證識別系統(tǒng)大多數(shù)是基于對圖片布局的分析，進(jìn)而提取身份證中文字區(qū)域,此方法抗干擾能力較差,對于復(fù)雜的圖片背景無法較好的分析出圖片中文字的位置。現(xiàn)有文字識別方法,基于人造的特征對檢測出來的文字區(qū)域進(jìn)行文字識別,文字識別準(zhǔn)確率較低.無法確定圖片中是否存在身份證信息，不利于身份證的識別操作。

有鑒于此，有必要提出對目前的身份證識別技術(shù)進(jìn)行進(jìn)一步的改進(jìn)。

發(fā)明內(nèi)容

為解決上述至少一技術(shù)問題，本發(fā)明的主要目的是提供一種基于深度學(xué)習(xí)的身份證自動識別方法、系統(tǒng)、計算機(jī)設(shè)備及存儲介質(zhì)。

為實現(xiàn)上述目的，本發(fā)明采用的第一個技術(shù)方案為：提供一種基于深度學(xué)習(xí)的身份證自動識別方法，包括：

在獲取到輸入圖片時，利用第一個全卷積神經(jīng)網(wǎng)絡(luò)對輸入的身份證圖片進(jìn)行人臉和國徽的特征檢測，得到圖片的旋轉(zhuǎn)信息，并矯正；

利用第二個全卷積神經(jīng)網(wǎng)絡(luò)對旋轉(zhuǎn)后的圖片進(jìn)行文字檢測，得到真實文字所在區(qū)域的多個文字框；

對文字框進(jìn)行傾斜矯正，以將多個文字框的角度調(diào)整呈水平方向；

計算所有水平方向的文字框中相鄰文字框之間的交并比，以使處于同一行的多個文字框連接；

利用第三個全卷積神經(jīng)網(wǎng)絡(luò)對連接后的文字框根據(jù)傾斜角度進(jìn)行文字識別，以識別的連接后的文字框中的字符。

其中，所述利用第一個全卷積神經(jīng)網(wǎng)絡(luò)對于輸入的身份證圖片進(jìn)行人臉和國徽的特征檢測，得到圖片的旋轉(zhuǎn)信息，并矯正，具體包括：

利用第一個全卷積神經(jīng)網(wǎng)絡(luò)對于輸入的身份證圖片上的四個方向的人臉與國徽的特征標(biāo)志，得到特征標(biāo)志的位置及方向數(shù)據(jù)；

根據(jù)特征標(biāo)志的方向數(shù)據(jù)對輸入的圖片進(jìn)行轉(zhuǎn)正；

根據(jù)特征標(biāo)志的位置數(shù)據(jù)從整個身份證圖片中剝離出身份證區(qū)域圖像，并送入第二個全卷積神經(jīng)網(wǎng)絡(luò)。

其中，所述對文字框進(jìn)行傾斜矯正，具體包括：

對第二個全卷積神經(jīng)網(wǎng)絡(luò)輸出的文字框進(jìn)行仿射變換。

其中，所述計算所有水平方向的文字框中相鄰文字框之間的交并比，以使處于同一行的多個文字框連接，具體包括：

將所有文字框按照Y軸上的重合度計算；

若重合度大于設(shè)定閾值，則對相鄰的兩個文字框進(jìn)行橫向連接。

其中，所述對相鄰的兩個文字框進(jìn)行橫向連接之后，包括：

從所有文字框中選定第二寬度的文字框的寬度作為設(shè)定寬度，

根據(jù)設(shè)定文字框的寬度調(diào)整其他文字框的寬度。

為實現(xiàn)上述目的，本發(fā)明采用的第二個技術(shù)方案為：提供一種基于深度學(xué)習(xí)的身份證自動識別系統(tǒng)，包括：