[發(fā)明專利]一種票據(jù)信息識(shí)別方法、裝置及系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 202010566121.8
• 申請(qǐng)日: 2020-06-19
• 公開(kāi)（公告）號(hào): CN111832423A
• 公開(kāi)（公告）日: 2020-10-27
• 發(fā)明（設(shè)計(jì)）人: 齊勇剛;蘇國(guó)耀;劉軍;楊潔
• 申請(qǐng)（專利權(quán)）人: 北京郵電大學(xué)
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;G06K9/20;G06K9/34;G06N3/04
• 代理公司: 北京柏杉松知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11413
• 代理人: 馬敬;項(xiàng)京

1.一種票據(jù)信息識(shí)別方法，其特征在于，應(yīng)用于票據(jù)信息識(shí)別系統(tǒng)中的光學(xué)字符識(shí)別OCR設(shè)備，所述方法包括：

接收對(duì)待識(shí)別票據(jù)圖像的信息識(shí)別請(qǐng)求；

基于所述信息識(shí)別請(qǐng)求，對(duì)所述待識(shí)別票據(jù)圖像進(jìn)行預(yù)處理，得到預(yù)處理后的待識(shí)別票據(jù)圖像；

利用預(yù)先訓(xùn)練好的票據(jù)信息識(shí)別模型，識(shí)別所述預(yù)處理后的待識(shí)別票據(jù)圖像中的票據(jù)信息，得到所述待識(shí)別票據(jù)圖像的票據(jù)信息；其中，所述票據(jù)信息識(shí)別模型是根據(jù)預(yù)設(shè)訓(xùn)練集訓(xùn)練得到的，所述預(yù)設(shè)訓(xùn)練集包括多個(gè)不同票據(jù)類型的樣本票據(jù)圖像，以及每一樣本票據(jù)圖像的樣本票據(jù)信息；

返回針對(duì)所述信息識(shí)別請(qǐng)求的第一響應(yīng)消息，所述第一響應(yīng)消息包括所述待識(shí)別票據(jù)圖像的票據(jù)信息。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述利用預(yù)先訓(xùn)練好的票據(jù)信息識(shí)別模型，識(shí)別所述預(yù)處理后的待識(shí)別票據(jù)圖像中的票據(jù)信息，得到所述待識(shí)別票據(jù)圖像的票據(jù)信息的步驟，包括：

基于預(yù)先訓(xùn)練好的票據(jù)信息識(shí)別模型，確定所述預(yù)處理后的待識(shí)別票據(jù)圖像中各個(gè)字符所在的區(qū)域作為字符區(qū)域，并識(shí)別所述字符區(qū)域中的字符，得到字符串集合；

對(duì)所述字符串集合進(jìn)行正則化匹配，得到所述待識(shí)別票據(jù)圖像的票據(jù)信息。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述基于所述信息識(shí)別請(qǐng)求，對(duì)所述待識(shí)別票據(jù)圖像進(jìn)行預(yù)處理，得到預(yù)處理后的待識(shí)別票據(jù)圖像的步驟，包括：

利用預(yù)設(shè)伽瑪系數(shù)，對(duì)所述信息識(shí)別請(qǐng)求中的待識(shí)別票據(jù)圖像進(jìn)行伽瑪變換，得到第一圖像；

將所述第一圖像轉(zhuǎn)換為灰度圖像，得到第二圖像；

基于所述第二圖像中各個(gè)像素點(diǎn)對(duì)應(yīng)像素值的平均值，對(duì)所述第二圖像進(jìn)行圖像二值化處理，得到第三圖像；

根據(jù)所述第三圖像中水平方向上每一行包括的各個(gè)像素點(diǎn)的像素值，豎直方向上每一列包括的各個(gè)像素點(diǎn)的像素值，以及預(yù)設(shè)像素值的像素點(diǎn)數(shù)量閾值，確定所述第三圖像的外邊框位置，并對(duì)所述外邊框位置內(nèi)的圖像進(jìn)行裁剪，得到第四圖像；

對(duì)所述第四圖像進(jìn)行傾斜校正，得到預(yù)處理后的待識(shí)別票據(jù)圖像。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，在基于所述信息識(shí)別請(qǐng)求，對(duì)所述待識(shí)別票據(jù)圖像進(jìn)行預(yù)處理，得到預(yù)處理后的待識(shí)別票據(jù)圖像之前，還包括：

對(duì)所述信息識(shí)別請(qǐng)求進(jìn)行認(rèn)證，得到認(rèn)證結(jié)果；

所述基于所述信息識(shí)別請(qǐng)求，對(duì)所述待識(shí)別票據(jù)圖像進(jìn)行預(yù)處理，得到預(yù)處理后的待識(shí)別票據(jù)圖像的步驟，包括：

在所述認(rèn)證結(jié)果指示所述信息識(shí)別請(qǐng)求為合法請(qǐng)求時(shí)，基于所述信息識(shí)別請(qǐng)求，對(duì)所述待識(shí)別票據(jù)圖像進(jìn)行預(yù)處理，得到預(yù)處理后的待識(shí)別票據(jù)圖像。

5.根據(jù)權(quán)利要求1-4任一所述的方法，其特征在于，在接收對(duì)待識(shí)別票據(jù)圖像的信息識(shí)別請(qǐng)求之后，還包括：

在當(dāng)前計(jì)算資源被占用的情況下，返回針對(duì)所述信息識(shí)別請(qǐng)求的第二響應(yīng)消息；所述第二響應(yīng)消息包括指示所述計(jì)算資源被占用的標(biāo)識(shí)碼。

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，在返回針對(duì)所述信息識(shí)別請(qǐng)求的第一響應(yīng)消息之前，還包括：

將所述待識(shí)別票據(jù)圖像和待識(shí)別票據(jù)圖像的票據(jù)信息存儲(chǔ)至所述票據(jù)信息識(shí)別系統(tǒng)中的存儲(chǔ)設(shè)備。

7.根據(jù)權(quán)利要求1所述的方法，其特征在于，采用以下步驟訓(xùn)練得到所述票據(jù)信息識(shí)別模型：

獲取所述預(yù)設(shè)訓(xùn)練集；

針對(duì)每一樣本票據(jù)圖像，利用預(yù)設(shè)深度學(xué)習(xí)網(wǎng)絡(luò)，識(shí)別該樣本票據(jù)圖像中票據(jù)信息，得到該樣本票據(jù)圖像的預(yù)測(cè)票據(jù)信息；

基于每一樣本票據(jù)圖像對(duì)應(yīng)的樣本票據(jù)信息和預(yù)測(cè)票據(jù)信息，計(jì)算所述預(yù)設(shè)深度學(xué)習(xí)網(wǎng)絡(luò)的的損失值；

當(dāng)所述損失值大于預(yù)設(shè)損失值閾值時(shí)，調(diào)整所述預(yù)設(shè)深度學(xué)習(xí)網(wǎng)絡(luò)的參數(shù)，并返回執(zhí)行所述針對(duì)每一樣本票據(jù)圖像，利用預(yù)設(shè)深度學(xué)習(xí)網(wǎng)絡(luò)，識(shí)別該樣本票據(jù)圖像中票據(jù)信息，得到該樣本票據(jù)圖像的預(yù)測(cè)票據(jù)信息的步驟；

當(dāng)所述損失值不大于所述預(yù)設(shè)損失值閾值時(shí)，將當(dāng)前的預(yù)設(shè)深度學(xué)習(xí)網(wǎng)絡(luò)確定為訓(xùn)練好的票據(jù)信息識(shí)別模型。