[發(fā)明專利]票據(jù)識(shí)別方法和裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 202011330551.6
• 申請(qǐng)日: 2020-11-24
• 公開(kāi)（公告）號(hào): CN112329708A
• 公開(kāi)（公告）日: 2021-02-05
• 發(fā)明（設(shè)計(jì)）人: 韓光耀;龐敏輝;陳禹燊;馮博豪
• 申請(qǐng)（專利權(quán)）人: 北京百度網(wǎng)訊科技有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;G06K9/20;G06K9/62;G06N3/04;G06N3/08;G06N20/20
• 代理公司: 北京英賽嘉華知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11204
• 代理人: 王達(dá)佐;馬曉亞

本申請(qǐng)涉及圖像識(shí)別領(lǐng)域和自然語(yǔ)言處理領(lǐng)域，公開(kāi)了票據(jù)識(shí)別方法和裝置：通過(guò)獲取票據(jù)圖片，以及獲取票據(jù)圖片中關(guān)鍵字段的機(jī)器識(shí)別結(jié)果和機(jī)器識(shí)別結(jié)果關(guān)聯(lián)的特征數(shù)據(jù)，并基于機(jī)器識(shí)別結(jié)果關(guān)聯(lián)的特征數(shù)據(jù)和關(guān)鍵字段對(duì)應(yīng)的二分類模型，得到關(guān)鍵字段的機(jī)器識(shí)別結(jié)果的置信度，二分類模型與關(guān)鍵字段一一對(duì)應(yīng)，最后對(duì)關(guān)鍵字段的機(jī)器識(shí)別結(jié)果的置信度進(jìn)行判斷，以及響應(yīng)于確定關(guān)鍵字段的機(jī)器識(shí)別結(jié)果的置信度符合預(yù)設(shè)條件，將關(guān)鍵字段的機(jī)器識(shí)別結(jié)果確定為票據(jù)圖片中關(guān)鍵字段的識(shí)別結(jié)果。使得機(jī)器識(shí)別結(jié)果的置信度與機(jī)器識(shí)別結(jié)果的特征數(shù)據(jù)相關(guān)，提高了機(jī)器識(shí)別結(jié)果的置信度的準(zhǔn)確性，從而根據(jù)該置信度確定票據(jù)識(shí)別結(jié)果，提高了票據(jù)識(shí)別結(jié)果的準(zhǔn)確性。

技術(shù)領(lǐng)域

本申請(qǐng)涉及計(jì)算機(jī)技術(shù)領(lǐng)域，具體涉及圖像識(shí)別領(lǐng)域和自然語(yǔ)言處理領(lǐng)域，尤其涉及一種票據(jù)識(shí)別方法和裝置。

背景技術(shù)

隨著科技不斷進(jìn)步，越來(lái)越多的票據(jù)需要審核，通過(guò)對(duì)票據(jù)進(jìn)行機(jī)器識(shí)別，得到票據(jù)中關(guān)鍵字段的識(shí)別結(jié)果，比如金額、日期、客戶姓名和用途等的機(jī)器識(shí)別結(jié)果，然后根據(jù)識(shí)別后的機(jī)器識(shí)別結(jié)果對(duì)票據(jù)進(jìn)行審核。然而很多票據(jù)由于拍攝的圖片比較模糊，不同的票據(jù)版式相差很大，圖片的拍攝角度差別也很大，對(duì)票據(jù)中關(guān)鍵字段的識(shí)別難度很大，從而導(dǎo)致關(guān)鍵字段的機(jī)器識(shí)別結(jié)果準(zhǔn)確率不高。因此，為了提高票據(jù)識(shí)別結(jié)果的準(zhǔn)確率，將關(guān)鍵字段的平均識(shí)別概率作為該關(guān)鍵字段的置信度，并通過(guò)提高關(guān)鍵字段的置信度閾值來(lái)提高關(guān)鍵字段的識(shí)別結(jié)果的準(zhǔn)確率。

然而隨著置信度閾值的不斷提高，關(guān)鍵字段的識(shí)別結(jié)果的準(zhǔn)確率會(huì)不斷增加，但是關(guān)鍵字段的識(shí)別結(jié)果的召回率會(huì)不斷下降，從而會(huì)損失很多識(shí)別正確的關(guān)鍵字段。

發(fā)明內(nèi)容

本申請(qǐng)實(shí)施例提供了一種票據(jù)識(shí)別方法、裝置、電子設(shè)備以及存儲(chǔ)介質(zhì)。

第一方面，本申請(qǐng)實(shí)施例提供了一種票據(jù)識(shí)別方法，該方法包括：獲取票據(jù)圖片，以及獲取票據(jù)圖片中關(guān)鍵字段的機(jī)器識(shí)別結(jié)果和機(jī)器識(shí)別結(jié)果關(guān)聯(lián)的特征數(shù)據(jù)；基于機(jī)器識(shí)別結(jié)果關(guān)聯(lián)的特征數(shù)據(jù)和關(guān)鍵字段對(duì)應(yīng)的二分類模型，得到關(guān)鍵字段的機(jī)器識(shí)別結(jié)果的置信度，其中，二分類模型與關(guān)鍵字段一一對(duì)應(yīng)；對(duì)關(guān)鍵字段的機(jī)器識(shí)別結(jié)果的置信度進(jìn)行判斷，以及響應(yīng)于確定關(guān)鍵字段的機(jī)器識(shí)別結(jié)果的置信度符合預(yù)設(shè)條件，將關(guān)鍵字段的機(jī)器識(shí)別結(jié)果確定為票據(jù)圖片中關(guān)鍵字段的識(shí)別結(jié)果。

在一些實(shí)施例中，二分類模型基于以下步驟實(shí)現(xiàn)：獲取樣本票據(jù)圖片集，樣本票據(jù)圖片集包括訓(xùn)練圖片集；獲取訓(xùn)練圖片集中樣本關(guān)鍵字段的機(jī)器識(shí)別結(jié)果關(guān)聯(lián)的樣本特征數(shù)據(jù)和樣本關(guān)鍵字段的機(jī)器識(shí)別結(jié)果的標(biāo)注結(jié)果，其中，樣本關(guān)鍵字段的機(jī)器識(shí)別結(jié)果的標(biāo)注結(jié)果用于表征機(jī)器識(shí)別結(jié)果是否正確；基于樣本關(guān)鍵字段的樣本特征數(shù)據(jù)和對(duì)應(yīng)的標(biāo)注結(jié)果進(jìn)行訓(xùn)練，得到樣本關(guān)鍵字段對(duì)應(yīng)的二分類模型。

在一些實(shí)施例中，二分類模型還包括與關(guān)鍵字段對(duì)應(yīng)的模型標(biāo)識(shí)；以及基于機(jī)器識(shí)別結(jié)果關(guān)聯(lián)的特征數(shù)據(jù)和關(guān)鍵字段對(duì)應(yīng)的二分類模型，得到關(guān)鍵字段的機(jī)器識(shí)別結(jié)果的置信度，包括：獲取與關(guān)鍵字段對(duì)應(yīng)的模型標(biāo)識(shí)，并基于模型標(biāo)識(shí)調(diào)用與模型標(biāo)識(shí)對(duì)應(yīng)的二分類模型；將機(jī)器識(shí)別結(jié)果關(guān)聯(lián)的特征數(shù)據(jù)輸入二分類模型，得到關(guān)鍵字段的機(jī)器識(shí)別結(jié)果的置信度。

在一些實(shí)施例中，樣本票據(jù)圖片集還包括驗(yàn)證圖片集；該方法還包括：獲取驗(yàn)證圖片集中驗(yàn)證關(guān)鍵字段的機(jī)器識(shí)別結(jié)果的驗(yàn)證特征數(shù)據(jù)和驗(yàn)證關(guān)鍵字段的機(jī)器識(shí)別結(jié)果的標(biāo)注結(jié)果，其中，驗(yàn)證關(guān)鍵字段和樣本關(guān)鍵字段相同；響應(yīng)于獲取到樣本關(guān)鍵字段對(duì)應(yīng)的二分類模型，基于驗(yàn)證關(guān)鍵字段的機(jī)器識(shí)別結(jié)果的驗(yàn)證特征數(shù)據(jù)和標(biāo)注結(jié)果對(duì)二分類模型進(jìn)行參數(shù)調(diào)整，得到調(diào)整后的二分類模型。

在一些實(shí)施例中，樣本票據(jù)圖片集還包括測(cè)試圖片集；該方法還包括：獲取測(cè)試圖片集中的測(cè)試關(guān)鍵字段的機(jī)器識(shí)別結(jié)果的測(cè)試特征數(shù)據(jù)和測(cè)試關(guān)鍵字段的機(jī)器識(shí)別結(jié)果的標(biāo)注結(jié)果，其中，測(cè)試關(guān)鍵字段和樣本關(guān)鍵字段相同；響應(yīng)于獲取到調(diào)整后的二分類模型，基于測(cè)試關(guān)鍵字段的機(jī)器識(shí)別結(jié)果的測(cè)試特征數(shù)據(jù)和標(biāo)注結(jié)果對(duì)調(diào)整后的二分類模型進(jìn)行測(cè)試，得到調(diào)整后的二分類模型的準(zhǔn)確率和召回率。