[發明專利]基于特征提取的報表識別方法、裝置、電子設備及介質

在審

• 申請號: 202110728172.0
• 申請日: 2021-06-29
• 公開（公告）號: CN113420684A
• 公開（公告）日: 2021-09-21
• 發明（設計）人: 劉海懷;張燦豪;張杰
• 申請（專利權）人: 深圳壹賬通智能科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/46;G06K9/62;G06N3/04;G06N3/08;G06K9/38;G06T5/00
• 代理公司: 深圳市沃德知識產權代理事務所(普通合伙) 44347
• 代理人: 高杰;于志光

1.一種基于特征提取的報表識別方法，其特征在于，所述方法包括：

獲取報表圖像的存儲路徑，根據所述存儲路徑獲取所述報表圖像，以及提取所述報表圖像的圖像特征；

根據所述圖像特征確定所述報表圖像的文本方向；

判斷所述文本方向是否為預設方向；

若是，確認所述報表圖像為目標報表圖像；

若否，則將所述報表圖像進行角度轉換，得到所述目標報表圖像；

獲取預訓練的特征提取網絡，利用所述特征提取網絡提取所述目標報表圖像的文本信息，得到目標文本。

2.如權利要求1所述的基于特征提取的報表識別方法，其特征在于，所述根據所述存儲路徑獲取所述報表圖像，包括：

從所述存儲路徑中獲取所述報表圖像的存儲地址和存儲流水號；

在所述存儲地址對應的數據庫中查詢所述存儲流水號對應的報表圖像是否唯一；

若所述存儲流水號對應的報表圖像不唯一，則將所述存儲流水號對應的報表圖像舍棄，并再次獲取所述獲取報表圖像的存儲路徑；

若所述存儲流水號對應的報表圖像唯一，則根據所述存儲地址獲取所述報表圖像。

3.如權利要求1所述的基于特征提取的報表識別方法，其特征在于，所述提取所述報表圖像的圖像特征之前，所述方法還包括：

獲取所述報表圖像，并對所述報表圖像進行二值化操作，得到二值化報表圖像；

通過對所述二值化報表圖像進行去噪，得到去噪報表圖像；

通過預設的直線檢測法檢測所述去噪報表圖像的直線組，并對所述去噪報表圖像的直線組進行直線補償。

4.如權利要求1所述的基于特征提取的報表識別方法，其特征在于，所述根據所述圖像特征確定所述報表圖像的文本方向，包括：

將多個不同方向作為所述報表圖像的預設文本方向，識別所述報表圖像在所述多個不同方向的字符及其置信度；

根據所述圖像特征識別所述報表圖像中的文本類別；

對所述多個不同方向的字符中不屬于所述報表圖像的文本類別的字符的置信度按預設比例減小；

統計在各個多個文本方向上的累積置信度，確定累計置信度最大時對應的文本方向為所述報表圖像的文本方向。

5.如權利要求1至4中任一項所述的基于特征提取的報表識別方法，其特征在于，所述獲取預訓練的特征提取網絡，利用所述特征提取網絡提取所述目標報表圖像的文本信息，得到目標文本，包括：

根據所述目標報表圖像選取特征維度，根據所述特征維度對所述目標報表圖像進行特征提取，得到報表特征；

通過對所述報表特征進行降維得到降維報表特征，并利用所述特征提取網絡中的分類器對所述降維報表特征進行分類，得到目標文本。

6.如權利要求1至4中任一項所述的基于特征提取的報表識別方法，其特征在于，所述將所述報表圖像進行角度轉換，得到所述目標報表圖像，包括：

根據所述報表圖像創建原始變換矩陣；

根據所述原始變換矩陣構建包含未知參數的原始變換方程；

利用所述報表圖像的邊緣坐標點和所述原始變換方程進行計算，得到標準變換矩陣；

根據所述標準變換矩陣對所述報表圖像進行角度轉換，得到所述目標報表圖像。

7.如權利要求1至4中任一項所述的基于特征提取的報表識別方法，其特征在于，所述提取所述報表圖像的圖像特征，包括：

通過卷積操作、歸一化操作、激活操作構建第一卷積層；

利用預設的合并函數和預設的相加函數構建第二卷積層，并通過所述第一卷積層和第二卷積層構建卷積神經網絡；

利用所述卷積神經網絡提取所述報表圖像的圖像特征。