[發(fā)明專利]票據(jù)圖像的矯正方法、裝置及計(jì)算機(jī)設(shè)備

有效

• 申請?zhí)枺?/td>: 202010164109.4
• 申請日: 2020-03-11
• 公開（公告）號(hào): CN111507181B
• 公開（公告）日: 2023-05-26
• 發(fā)明（設(shè)計(jì)）人: 周軍
• 申請（專利權(quán)）人: 平安科技（深圳）有限公司
• 主分類號(hào): G06V30/146
• 分類號(hào): G06V30/146;G06V30/148;G06V30/40;G06T5/00
• 代理公司: 北京中強(qiáng)智尚知識(shí)產(chǎn)權(quán)代理有限公司 11448
• 代理人: 黃耀威

1.一種票據(jù)圖像的矯正方法，其特征在于，包括：

獲取與待矯正票據(jù)圖片票據(jù)類型相同的樣本票據(jù)圖片；

對(duì)所述樣本票據(jù)圖片進(jìn)行數(shù)據(jù)處理，獲取得到對(duì)應(yīng)的扭曲矩陣；

基于語義分割算法創(chuàng)建語義分割模型，并利用處理后的樣本票據(jù)圖片及對(duì)應(yīng)的所述扭曲矩陣訓(xùn)練所述語義分割模型，以使所述語義分割模型符合預(yù)設(shè)標(biāo)準(zhǔn)；

將所述待矯正票據(jù)圖片輸入符合所述預(yù)設(shè)標(biāo)準(zhǔn)的語義分割模型中，獲取得到矯正矩陣；

利用所述矯正矩陣矯正所述待矯正票據(jù)圖片；

所述對(duì)所述樣本票據(jù)圖片進(jìn)行數(shù)據(jù)處理，獲取得到對(duì)應(yīng)的扭曲矩陣，具體包括：

從所述樣本票據(jù)圖片中隨機(jī)選取多個(gè)扭曲變形起始點(diǎn)；

在所述扭曲變形起始點(diǎn)處基于扭曲公式對(duì)所述樣本票據(jù)圖片進(jìn)行扭曲處理，以便獲取得到各個(gè)所述扭曲變形起始點(diǎn)對(duì)應(yīng)不同扭曲狀態(tài)下的第一扭曲矩陣；

對(duì)扭曲處理后的樣本票據(jù)圖片進(jìn)行缺失像素點(diǎn)的線性插值填充，獲取得到符合預(yù)設(shè)尺寸的第一樣本票據(jù)圖片；

從所述樣本票據(jù)圖片中隨機(jī)選取多個(gè)折疊變形起始點(diǎn)；

在所述折疊變形起始點(diǎn)處基于折疊公式對(duì)所述樣本票據(jù)圖片進(jìn)行折疊處理，以便獲取得到各個(gè)所述折疊變形起始點(diǎn)對(duì)應(yīng)不同折疊狀態(tài)下的第二扭曲矩陣；

對(duì)折疊處理后的樣本票據(jù)圖片進(jìn)行缺失像素點(diǎn)的線性插值填充，獲取得到符合所述預(yù)設(shè)尺寸的第二樣本票據(jù)圖片；

所述基于語義分割算法創(chuàng)建語義分割模型，并利用處理后的樣本票據(jù)圖片及對(duì)應(yīng)的所述扭曲矩陣訓(xùn)練所述語義分割模型，以使所述語義分割模型符合預(yù)設(shè)標(biāo)準(zhǔn)，具體包括：

為所述第一樣本票據(jù)圖片及所述第二樣本票據(jù)圖片配置標(biāo)簽，所述標(biāo)簽對(duì)應(yīng)所述第一扭曲矩陣及所述第二扭曲矩陣；

將配置標(biāo)簽后的所述第一樣本票據(jù)圖片及所述第二樣本票據(jù)圖片輸入語義分割模型中，分別獲取得到對(duì)應(yīng)的第一預(yù)測扭曲矩陣及第二預(yù)測扭曲矩陣；

計(jì)算所述第一預(yù)測扭曲矩陣與所述第一扭曲矩陣之間的第一損失函數(shù)及所述第二預(yù)測扭曲矩陣與所述第二扭曲矩陣之間的第二損失函數(shù)；

若確定所述第一損失函數(shù)及所述第二損失函數(shù)均小于預(yù)設(shè)閾值，則判定所述語義分割模型符合預(yù)設(shè)標(biāo)準(zhǔn)；

若確定存在大于或等于所述預(yù)設(shè)閾值的第一損失函數(shù)或第二損失函數(shù)，則利用所述第一扭曲矩陣及所述第二扭曲矩陣修正訓(xùn)練所述語義分割模型的輸出結(jié)果，以使所述語義分割模型符合所述預(yù)設(shè)標(biāo)準(zhǔn)。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述扭曲公式為：，其中，為預(yù)設(shè)扭曲效果，是常數(shù)值2，d為所述扭曲變形起始點(diǎn)經(jīng)過扭曲變形后的偏移點(diǎn)與所述扭曲變形起始點(diǎn)之間的歐氏距離；

所述在所述扭曲變形起始點(diǎn)處基于扭曲公式對(duì)所述樣本票據(jù)圖片進(jìn)行扭曲處理，以便獲取得到各個(gè)所述扭曲變形起始點(diǎn)對(duì)應(yīng)不同扭曲狀態(tài)下的第一扭曲矩陣，具體包括：

根據(jù)所述扭曲公式計(jì)算在所述預(yù)設(shè)扭曲效果下所述扭曲變形起始點(diǎn)對(duì)應(yīng)的第一偏移點(diǎn)；

將所述扭曲變形起始點(diǎn)處的像素點(diǎn)移動(dòng)到所述第一偏移點(diǎn)處；

構(gòu)建包含所述扭曲變形起始點(diǎn)位置坐標(biāo)及所述第一偏移點(diǎn)位置坐標(biāo)的第一扭曲矩陣。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述折疊公式為：，其中，為預(yù)設(shè)折疊效果，是常數(shù)值2，d為所述折疊變形起始點(diǎn)經(jīng)過折疊變形后的偏移點(diǎn)與所述折疊變形起始點(diǎn)之間的歐氏距離；

所述在所述折疊變形起始點(diǎn)處基于折疊公式對(duì)所述樣本票據(jù)圖片進(jìn)行折疊處理，以便獲取得到各個(gè)所述折疊變形起始點(diǎn)對(duì)應(yīng)不同折疊狀態(tài)下的第二扭曲矩陣，具體包括：

根據(jù)所述折疊公式計(jì)算在所述預(yù)設(shè)折疊效果下所述折疊變形起始點(diǎn)對(duì)應(yīng)的第二偏移點(diǎn)；

將所述折疊變形起始點(diǎn)處的像素點(diǎn)移動(dòng)到所述第二偏移點(diǎn)處；

構(gòu)建包含所述折疊變形起始點(diǎn)位置坐標(biāo)及所述第二偏移點(diǎn)位置坐標(biāo)的第二扭曲矩陣。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，在所述將所述待矯正票據(jù)圖片輸入符合所述預(yù)設(shè)標(biāo)準(zhǔn)的語義分割模型中，獲取得到矯正矩陣之前，具體還包括：

調(diào)整所述待矯正票據(jù)圖片，以使所述待矯正票據(jù)圖片符合預(yù)設(shè)尺寸；

所述將所述待矯正票據(jù)圖片輸入符合所述預(yù)設(shè)標(biāo)準(zhǔn)的語義分割模型中，獲取得到矯正矩陣，具體包括：

將預(yù)處理后的所述待矯正票據(jù)圖片輸入符合所述預(yù)設(shè)標(biāo)準(zhǔn)的語義分割模型中，獲取得到矯正矩陣。