[發明專利]圖片信息識別方法、裝置、計算機設備和存儲介質

在審

• 申請號: 201910207427.1
• 申請日: 2019-03-19
• 公開（公告）號: CN110059687A
• 公開（公告）日: 2019-07-26
• 發明（設計）人: 孫強;陸凱杰
• 申請（專利權）人: 平安科技（深圳）有限公司
• 主分類號: G06K9/34
• 分類號: G06K9/34;G06K9/00
• 代理公司: 廣州華進聯合專利商標代理有限公司 44224
• 代理人: 王寧;李文淵

1.一種圖片信息識別方法，所述方法包括：

接收第一終端上傳的業務圖片；

當所述業務圖片包含圖表信息時，確定所述業務圖片對應的圖表類型；

若所述圖表類型為第一類型，提取所述業務圖片中的圖表線條，對多個圖表線條進行拼接，得到第一圖表；所述第一圖表包括多個空白格；

識別每個空白格對應的信息文本；

將所述第一圖表轉換為第二圖表；所述第二圖表包括多個標準格；

確定所述標準格與空白格之間的對應關系，根據所述對應關系將所述信息文本填充至標準格中，得到業務圖片對應的業務圖表，將所述業務圖表存儲至圖表庫。

2.根據權利要求1所述的方法，其特征在于，所述接收第一終端上傳的業務圖片，包括：

接收第一終端發送的業務請求；所述業務請求攜帶了業務類型；

獲取所述業務類型對應的源業務頁面隊列；所述源業務頁面隊列包括特征頁面；所述特征頁面包括空白單元；

將所述源業務頁面隊列返回至所述第一終端，使第一終端展示所述源業務頁面隊列，當顯示特征頁面時，采集業務數據，將采集的業務數據填入至特征頁面的空白單元，生成目標業務頁面隊列；

接收第一終端發送的目標業務頁面隊列，從所述目標業務頁面隊列中提取業務數據；所述業務數據包括業務文件；

對所述業務文件進行掃描，得到至少一張包含圖表信息的業務圖片。

3.根據權利要求2所述的方法，其特征在于，所述方法還包括：

接收第二終端基于業務文件發送的圖表查詢請求；

根據所述圖表查詢請求包含的查詢字段，在圖表庫中查找對應的業務圖表；

獲取所述業務圖表在業務文件中的布局信息；

將所述業務圖表及對應的布局信息返回至所述第二終端；使第二終端根據布局信息在業務文件中對業務圖表進行快速定位，并將相應業務圖片采用獲取到的業務圖表進行替換。

4.根據權利要求1所述的方法，其特征在于，所述提取所述業務圖片中的圖表線條，對多個圖表線條進行拼接，得到第一圖表，包括：

根據橫向腐蝕膨脹算法在所述業務圖片上進行橫向線條檢測，得到多個橫向線條；

根據豎向腐蝕膨脹算法在所述業務圖片上進行豎向線條檢測，得到多個豎向線條；

將所述橫向線條和所述豎向線條相交，得到表格線圖；

通過邊緣檢測將所述表格線圖中的非單元格元素過濾，得到第一圖表。

5.根據權利要求1所述的方法，其特征在于，所述識別每個空白格對應的信息文本，包括：

剪取每個所述空白格中的信息區塊圖；

將所述信息區塊圖輸入預設的卷積神經網絡模型，識別得到每個信息區塊圖對應的信息文本。

6.根據權利要求1所述的方法，其特征在于，所述確定每個標準格相匹配的空白格，包括：

確定每個標準格的起點坐標，根據起點坐標對第二圖表進行遍歷；

查詢當前遍歷順序的標準格是否存在起點坐標相同的空白格；

若是，將起點坐標相同的空白格標記為相應標準格相匹配的空白格；

否則，將同行前一列或者同列前一行標準格相匹配的空白格標記為當前遍歷順序標準格相匹配的空白格；

將下一遍歷順序的標準格標記為當前遍歷順序的標準格，返回所述查詢當前遍歷順序的標準格是否存在起點坐標相同的空白格的步驟，直至所述第二圖表遍歷完成。

7.一種圖片信息識別裝置，所述裝置包括：

圖片識別模塊，用于接收第一終端上傳的業務圖片；當所述業務圖片包含圖表信息時，確定所述業務圖片對應的圖表類型；

表格重構模塊，用于若所述圖表類型為第一類型，提取所述業務圖片中的圖表線條，對多個圖表線條進行拼接，得到第一圖表；所述第一圖表包括多個空白格；將所述第一圖表轉換為第二圖表；所述第二圖表包括多個標準格；

文本映射模塊，用于識別每個空白格對應的信息文本；確定所述標準格與空白格之間的對應關系，根據所述對應關系將所述信息文本填充至標準格中，得到業務圖片對應的業務圖表，將所述業務圖表存儲至圖表庫。