[發(fā)明專利]表格檢測(cè)方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202310108917.2
• 申請(qǐng)日: 2023-01-31
• 公開(kāi)（公告）號(hào): CN116052188A
• 公開(kāi)（公告）日: 2023-05-02
• 發(fā)明（設(shè)計(jì)）人: 章成全;庾悅晨;呂鵬原
• 申請(qǐng)（專利權(quán)）人: 北京百度網(wǎng)訊科技有限公司
• 主分類號(hào): G06V30/18
• 分類號(hào): G06V30/18;G06V30/41;G06V30/414
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 蔡舒野

1.一種表格檢測(cè)方法，包括：

對(duì)待檢測(cè)的表格圖像進(jìn)行特征提取，得到表格特征信息；

根據(jù)所述表格特征信息分別對(duì)所述表格圖像進(jìn)行分割線預(yù)測(cè)和頂點(diǎn)預(yù)測(cè)，得到所述表格圖像中的分割線和表格頂點(diǎn)；

根據(jù)所述表格圖像中的分割線對(duì)表格圖像中的表格頂點(diǎn)進(jìn)行修正，得到修正后的表格頂點(diǎn)；

對(duì)修正后的表格頂點(diǎn)和所述分割線進(jìn)行匹配，并根據(jù)匹配關(guān)系得到所述表格圖像中的單元格信息。

2.根據(jù)權(quán)利要求1所述的方法，其中，所述根據(jù)所述表格圖像中的分割線對(duì)表格圖像中的表格頂點(diǎn)進(jìn)行修正，得到修正后的表格頂點(diǎn)，包括：

根據(jù)所述表格圖像中的分割線，從所述表格特征信息中提取分割線的特征信息；

根據(jù)所述表格圖像中的表格頂點(diǎn)，從所述表格特征信息中提取表格頂點(diǎn)的特征信息；

根據(jù)所述分割線的特征信息對(duì)所述表格頂點(diǎn)的特征信息進(jìn)行修正，得到修正后的表格頂點(diǎn)的特征信息；

根據(jù)修正后的表格頂點(diǎn)的特征信息，確定修正后的表格頂點(diǎn)的像素坐標(biāo)。

3.根據(jù)權(quán)利要求2所述的方法，其中，所述根據(jù)所述分割線的特征信息對(duì)所述表格頂點(diǎn)的特征信息進(jìn)行修正，得到修正后的表格頂點(diǎn)的特征信息，包括：

將所述分割線的特征信息分別作為注意力模型中的鍵向量和鍵值向量，并將所述表格頂點(diǎn)的特征信息作為注意力模型中的查詢向量，得到注意力模型的輸出向量；

根據(jù)所述注意力模型的輸出向量得到修正后的表格頂點(diǎn)的特征信息。

4.根據(jù)權(quán)利要求2所述的方法，所述得到修正后的表格頂點(diǎn)的特征信息之后，還包括：

根據(jù)修正后的表格頂點(diǎn)的特征信息，確定修正后的表格頂點(diǎn)的置信度；

根據(jù)所述置信度，對(duì)修正后的表格頂點(diǎn)進(jìn)行過(guò)濾。

5.根據(jù)權(quán)利要求1-4中任一項(xiàng)所述的方法，其中，所述對(duì)修正后的表格頂點(diǎn)和所述分割線進(jìn)行匹配，并根據(jù)匹配關(guān)系得到所述表格圖像中的單元格信息，包括：

根據(jù)所述分割線對(duì)所述表格圖像進(jìn)行劃分，得到表格圖像中的單元格和單元格頂點(diǎn)的邏輯坐標(biāo)；

根據(jù)修正后的表格頂點(diǎn)的特征信息和分割線的特征信息對(duì)修正后的表格頂點(diǎn)和分割線進(jìn)行匹配，得到修正后的表格頂點(diǎn)的邏輯坐標(biāo)；

根據(jù)所述單元格頂點(diǎn)的邏輯坐標(biāo)和修正后的表格頂點(diǎn)的邏輯坐標(biāo)，確定修正后的表格頂點(diǎn)所匹配的單元格頂點(diǎn)，并將修正后的表格頂點(diǎn)的像素坐標(biāo)作為所匹配單元格頂點(diǎn)的像素坐標(biāo)。

6.根據(jù)權(quán)利要求5所述的方法，其中，所述根據(jù)修正后的表格頂點(diǎn)的特征信息和所述分割線的特征信息對(duì)修正后的表格頂點(diǎn)和分割線進(jìn)行匹配，得到修正后的表格頂點(diǎn)的邏輯坐標(biāo)，包括：

根據(jù)修正后的表格頂點(diǎn)的特征信息與各分割線的特征信息之間的相似度，確定與修正后的表格頂點(diǎn)所匹配的行分割線和與修正后的表格頂點(diǎn)所匹配的列分割線；

根據(jù)所述行分割線的序號(hào)和所述列分割線的序號(hào)確定修正后的表格頂點(diǎn)的邏輯坐標(biāo)。

7.一種表格檢測(cè)裝置，包括：

特征提取模塊，用于對(duì)待檢測(cè)的表格圖像進(jìn)行特征提取，得到表格特征信息；

表格預(yù)測(cè)模塊，用于根據(jù)所述表格特征信息分別對(duì)所述表格圖像進(jìn)行分割線預(yù)測(cè)和頂點(diǎn)預(yù)測(cè)，得到所述表格圖像中的分割線和表格頂點(diǎn)；

頂點(diǎn)修正模塊，用于根據(jù)所述表格圖像中的分割線對(duì)表格圖像中的表格頂點(diǎn)進(jìn)行修正，得到修正后的表格頂點(diǎn)；

頂點(diǎn)匹配模塊，用于對(duì)修正后的表格頂點(diǎn)和所述分割線進(jìn)行匹配，并根據(jù)匹配關(guān)系得到所述表格圖像中的單元格信息。

8.根據(jù)權(quán)利要求7所述的裝置，其中，所述頂點(diǎn)修正模塊包括：

線特征提取單元，用于根據(jù)所述表格圖像中的分割線，從所述表格特征信息中提取分割線的特征信息；

點(diǎn)特征提取單元，用于根據(jù)所述表格圖像中的表格頂點(diǎn)，從所述表格特征信息中提取表格頂點(diǎn)的特征信息；

點(diǎn)特征修正單元，用于根據(jù)所述分割線的特征信息對(duì)所述表格頂點(diǎn)的特征信息進(jìn)行修正，得到修正后的表格頂點(diǎn)的特征信息；

點(diǎn)坐標(biāo)修正單元，用于根據(jù)修正后的表格頂點(diǎn)的特征信息，確定修正后的表格頂點(diǎn)的像素坐標(biāo)。