[發(fā)明專利]基于深度學(xué)習(xí)的表格線檢測(cè)方法、裝置、終端、存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 201911038212.8
• 申請(qǐng)日: 2019-10-29
• 公開（公告）號(hào): CN110807404A
• 公開（公告）日: 2020-02-18
• 發(fā)明（設(shè)計(jì)）人: 周康明;胡威
• 申請(qǐng)（專利權(quán)）人: 上海眼控科技股份有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;G06K9/34;G06K9/46;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 上海光華專利事務(wù)所(普通合伙) 31219
• 代理人: 倪靜

1.一種基于深度學(xué)習(xí)的表格線檢測(cè)方法，其特征在于，包括：

對(duì)數(shù)據(jù)表格圖像集進(jìn)行圖像預(yù)處理，以形成濾除了圖像污染并計(jì)算了線條交點(diǎn)的位置數(shù)據(jù)的訓(xùn)練樣本集；

利用分割網(wǎng)絡(luò)模型對(duì)所述訓(xùn)練樣本集中的樣本圖像進(jìn)行圖像分割；

在通過連通域檢測(cè)算法檢測(cè)圖像分割結(jié)果合格的情況下，基于所述線條交點(diǎn)的位置數(shù)據(jù)分別提取表格的豎直線和水平線。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對(duì)數(shù)據(jù)表格圖像集進(jìn)行圖像預(yù)處理，包括：

對(duì)數(shù)據(jù)表格圖像集中的圖像進(jìn)行灰度閾值化，據(jù)以生成對(duì)應(yīng)的灰度圖像；

對(duì)所述灰度圖像進(jìn)行邊緣檢測(cè)，據(jù)以生成對(duì)應(yīng)的邊緣二值圖像；

對(duì)所述邊緣二值圖像進(jìn)行霍夫變換，據(jù)以計(jì)算兩條或多條直線的交點(diǎn)的位置數(shù)據(jù)。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述利用分割網(wǎng)絡(luò)模型對(duì)所述訓(xùn)練樣本集中的樣本圖像進(jìn)行圖像分割，包括：

將預(yù)處理后的數(shù)據(jù)表格圖像中的線條和交點(diǎn)按照表格屬性進(jìn)行分類；

利用PSPNet分割網(wǎng)絡(luò)模型對(duì)各類圖像進(jìn)行訓(xùn)練分割，并基于MIOU值來衡量分割效果。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述方法包括：

將預(yù)處理后的數(shù)據(jù)表格圖像中的線條和交點(diǎn)按照表格屬性分為水平直線類、豎直線類、交點(diǎn)類、或者背景類。

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法包括：

通過連通域檢測(cè)算法檢測(cè)圖像分割結(jié)果是否合格；

若合格，則基于所述線條交點(diǎn)的位置數(shù)據(jù)分別提取表格的豎直線和水平線；

若不合格，則將分割結(jié)果不合格的數(shù)據(jù)表格圖像加入訓(xùn)練樣本集中，并重新利用分割網(wǎng)絡(luò)模型對(duì)分割結(jié)果不合格的數(shù)據(jù)表格圖像進(jìn)行圖像分割。

6.根據(jù)權(quán)利要求5所述的方法，其特征在于，所述方法包括：

基于連通域檢測(cè)算法檢測(cè)圖像分割結(jié)果是否滿足線條的連續(xù)性要求；

若滿足線條的連續(xù)性要求，則確定為分割結(jié)果合格；

若不滿足線條的連續(xù)性要求，則在對(duì)圖像進(jìn)行圖像膨脹和/或圖像腐蝕操作后繼續(xù)檢測(cè)圖像分割結(jié)果是否滿足線條的連續(xù)性要求；

若仍不滿足線條的連續(xù)性要求，則確定為圖像分割結(jié)果不合格。

7.一種數(shù)據(jù)表格圖像的線條檢測(cè)裝置，其特征在于，包括：

圖像預(yù)處理模塊，用于對(duì)數(shù)據(jù)表格圖像集進(jìn)行圖像預(yù)處理，以形成濾除了圖像污染并計(jì)算了線條交點(diǎn)的位置數(shù)據(jù)的訓(xùn)練樣本集；

圖像分割模塊，用于利用分割網(wǎng)絡(luò)模型對(duì)所述訓(xùn)練樣本集中的樣本圖像進(jìn)行圖像分割；

線條檢測(cè)模塊，用于在通過連通域檢測(cè)算法檢測(cè)圖像分割結(jié)果合格的情況下，基于所述線條交點(diǎn)的位置數(shù)據(jù)分別提取表格的豎直線和水平線。

8.根據(jù)權(quán)利要求7所述的裝置，其特征在于，所述預(yù)處理模塊包括：

灰度處理模塊，用于對(duì)數(shù)據(jù)表格圖像集中的圖像進(jìn)行灰度閾值化，據(jù)以生成對(duì)應(yīng)的灰度圖像；

邊緣檢測(cè)模塊，用于對(duì)所述灰度圖像進(jìn)行邊緣檢測(cè)，據(jù)以生成對(duì)應(yīng)的邊緣二值圖像；

變換模塊，用于對(duì)所述邊緣二值圖像進(jìn)行霍夫變換，據(jù)以計(jì)算兩條或多條直線的交點(diǎn)的位置數(shù)據(jù)。

9.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序，其特征在于，所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)權(quán)利要求1至6中任一項(xiàng)所述基于深度學(xué)習(xí)的表格線檢測(cè)方法。

10.一種電子終端，其特征在于，包括：處理器及存儲(chǔ)器；

所述存儲(chǔ)器用于存儲(chǔ)計(jì)算機(jī)程序；

所述處理器用于執(zhí)行所述存儲(chǔ)器存儲(chǔ)的計(jì)算機(jī)程序，以使所述終端執(zhí)行如權(quán)利要求1至6中任一項(xiàng)所述基于深度學(xué)習(xí)的表格線檢測(cè)方法。