[發明專利]票據內容識別方法、裝置、介質及電子設備

有效

• 申請號: 202010973195.3
• 申請日: 2020-09-16
• 公開（公告）號: CN111931771B
• 公開（公告）日: 2021-01-01
• 發明（設計）人: 吳貞海
• 申請（專利權）人: 深圳壹賬通智能科技有限公司
• 主分類號: G06K9/32
• 分類號: G06K9/32;G06K9/42;G06T3/40
• 代理公司: 深圳市隆天聯鼎知識產權代理有限公司 44232
• 代理人: 孫強

本公開涉及人工智能領域，揭示了一種票據內容識別方法、裝置、介質及電子設備。該方法包括：獲取基準票據圖片；確定各基準特征字段區域的位置信息和記錄的基準特征字段；獲取與基準票據圖片的版式一致的待識別票據圖片；獲得待識別圖片中多個特征字段和各特征字段的位置信息；基于各基準特征字段區域的位置信息和各目標特征字段的位置信息，計算透視變換矩陣；對待識別圖片進行縮放，使縮放后的待識別圖片的大小與基準票據圖片的大小一致；利用透視變換矩陣對縮放后的待識別圖片進行透視變換；根據基準票據圖片中內容選定區域的位置，對變換后的待識別圖片中相應位置對應的區域進行識別。此方法能夠精確有效地對票據內容進行識別。

技術領域

本公開涉及人工智能和圖像識別技術領域，特別涉及一種票據內容識別方法、裝置、介質及電子設備。

背景技術

NSTR（自然場景字符識別, nature scene text recognition）是一種特殊場景下的OCR識別（光學字符識別技術，optical character recognition）。一般場景下的OCR識別是針對特定文檔的掃描圖片所進行的識別，這些掃描圖片的格式，背景，大小，顏色，光線方面通常都有確定的穩定性，可以很容易進行較為準確地識別；目前，NSTR場景下的識別需求越來越多，利用數碼相機和手機等工具可以隨意拍攝的帶有文字的圖片，對此類圖片中內容的識別就屬于NSTR場景下的識別。NSTR場景下的票據內容識別就是一種NSTR場景下的實際識別需求。然而，由于光線、拍攝角度、拍攝目標的運動等因素的存在，常導致拍攝到的票據圖片存在扭曲，此時采用僅采用傳統OCR識別技術無法高效完成對這些票據圖片的識別，存在識別準確率不高、無法精確有效地提取信息的問題。

發明內容

在人工智能和圖像識別技術領域，為了解決上述技術問題，本公開的目的在于提供一種票據內容識別方法、裝置、介質及電子設備。

根據本公開的一方面，提供了一種票據內容識別方法，所述方法包括：

獲取基準票據圖片，其中，所述基準票據圖片中標注了至少預定數目個基準特征字段區域和至少一個內容選定區域，每一所述基準特征字段區域記錄了一個基準特征字段，各所述基準特征字段在所述基準票據圖片中是唯一的；

確定各基準特征字段區域在所述基準票據圖片中的位置信息和各基準特征字段區域中記錄的基準特征字段；

獲取與所述基準票據圖片的版面格式一致的待識別票據圖片；

對所述待識別票據圖片中的特征字段進行識別，得到多個特征字段和各特征字段的位置信息，其中，對于每一所述基準特征字段，所述多個特征字段中僅包括一個與該基準特征字段一致的特征字段，與所述基準特征字段一致的特征字段為目標特征字段；

基于各所述基準特征字段區域的位置信息和各所述目標特征字段的位置信息，計算透視變換矩陣；

對所述待識別票據圖片進行縮放，使縮放后的所述待識別票據圖片的大小與所述基準票據圖片的大小一致；

利用所述透視變換矩陣對縮放后的所述待識別票據圖片進行透視變換，得到變換后的待識別票據圖片；

根據所述基準票據圖片中內容選定區域的位置，對所述變換后的待識別票據圖片中相應位置對應的區域進行識別，得到所述待識別票據圖片的內容。

根據本公開的另一方面，提供了一種票據內容識別裝置，所述裝置包括：

第一獲取模塊，被配置為獲取基準票據圖片，其中，所述基準票據圖片中標注了至少預定數目個基準特征字段區域和至少一個內容選定區域，每一所述基準特征字段區域記錄了一個基準特征字段，各所述基準特征字段在所述基準票據圖片中是唯一的；

確定模塊，被配置為確定各基準特征字段區域在所述基準票據圖片中的位置信息和各基準特征字段區域中記錄的基準特征字段；