[發明專利]圖像矯正方法、不規則文本識別方法、裝置、存儲介質和設備

有效

• 申請號: 202010033574.4
• 申請日: 2020-01-13
• 公開（公告）號: CN111223065B
• 公開（公告）日: 2023-08-01
• 發明（設計）人: 徐卉;周祥東;石宇;程俊;羅代建
• 申請（專利權）人: 中國科學院重慶綠色智能技術研究院;中國科學院大學
• 主分類號: G06T5/00
• 分類號: G06T5/00;G06T3/40
• 代理公司: 上海光華專利事務所(普通合伙) 31219
• 代理人: 尹麗云

1.一種圖像矯正方法，其特征在于，所述圖像矯正方法包括：

獲取待識別的不規則文本；

對待識別的不規則文本圖像進行預處理，得到N段待矯正的子圖像，N大于或等于2，每段子圖像包含有不規則文字；

分別對所述N段待矯正的子圖像進行透視矯正，以得到N段矯正子圖像；

將所述N段矯正子圖像進行拼接得到最終的矯正圖像；

獲取矯正子圖像，包括：

獲取待矯正的子圖像的透視變換矩陣，所述透視變換矩陣表示待矯正的子圖像與矯正后的子圖像間的變換關系；

利用所述透視變換矩陣從待矯正的子圖像中提取出矯正后的子圖像中每一個像素點所對應的像素值；

將提取出的像素值按待矯正的子圖像與矯正后的子圖像間的變換關系填充至矯正后的子圖像中，得到矯正子圖像；

所述獲取待矯正的子圖像的透視變換矩陣，包括：

根據第N-1子圖像的透視變換矩陣計算第N-1子圖像中的文字區域角點坐標；

根據第N-1子圖像的文字區域角點坐標與第N子圖像中的文字區域的坐標計算第N子圖像的透視變換矩陣；

計算第一子圖像的透視變換矩陣，包括：

通過卷積神經網絡預測第一子圖像的變換偏移矩陣；

根據所述變換偏移矩陣與單位矩陣得到第一子圖像的透視變換矩陣。

2.一種圖像矯正裝置，其特征在于，所述圖像矯正裝置包括：

圖像獲取模塊，用于獲取待識別的不規則文本；

圖像預處理模塊，用于對待識別的不規則文本圖像進行預處理，得到N段待矯正的子圖像，N大于或等于2，每段子圖像包含有不規則文字；

圖像矯正模塊，用于分別對所述N段待矯正的子圖像進行透視矯正，以得到N段矯正子圖像；

圖像拼接模塊，用于將所述N段矯正子圖像進行拼接得到最終的矯正圖像；

所述圖像矯正模塊包括：

變換關系獲取子模塊，用于獲取待矯正的子圖像的透視變換矩陣，所述透視變換矩陣表示待矯正的子圖像與矯正后的子圖像間的變換關系；

像素提取子模塊，用于利用所述透視變換矩陣從待矯正的子圖像中提取出矯正后的子圖像中每一個像素點所對應的像素值；

像素填充子模塊，用于將提取出的像素值按待矯正的子圖像與矯正后的子圖像間的變換關系填充至矯正后的子圖像中，得到矯正子圖像；

所述變換關系獲取子模塊包括：

角點坐標計算單元，用于根據第N-1子圖像的透視變換矩陣計算第N-1子圖像中的文字區域角點坐標；

透視變換矩計算單元，用于根據第N-1子圖像的文字區域角點坐標與第N子圖像中的文字區域的坐標計算第N子圖像的透視變換矩陣；

計算第一子圖像的透視變換矩陣，包括：

通過卷積神經網絡預測第一子圖像的變換偏移矩陣；

根據所述變換偏移矩陣與單位矩陣得到第一子圖像的透視變換矩陣。

3.一種不規則文本識別方法，其特征在于，該識別方法包括：

接收如權利要求1所述的圖像矯正方法獲得的最終的矯正圖像；

識別所述最終的矯正圖像中的文字。

4.一種不規則文本識別裝置，其特征在于，該識別裝置包括：

圖像接收模塊，用于接收如權利要求1所述的圖像矯正方法獲得的最終的矯正圖像；

圖像識別模塊，用于識別所述最終的矯正圖像中的文字。

5.一種存儲介質，存儲計算機程序，其特征在于，所述計算機程序被處理器運行時執行如權利要求1所述的方法。

6.一種電子設備，其特征在于，包括：處理器及存儲器；

所述存儲器用于存儲計算機程序，所述處理器用于執行所述存儲器存儲的計算機程序，以使所述電子設備執行如權利要求1所述的方法。