[發明專利]圖像處理方法、圖像處理裝置、電子設備及存儲介質

在審

• 申請號: 202110597964.9
• 申請日: 2021-05-31
• 公開（公告）號: CN113436222A
• 公開（公告）日: 2021-09-24
• 發明（設計）人: 麻凱利;馬志國;張飛飛
• 申請（專利權）人: 新東方教育科技集團有限公司
• 主分類號: G06T7/136
• 分類號: G06T7/136;G06T7/194;G06T7/11;G06K9/20;G06K9/34;G06N3/04;G06N3/08
• 代理公司: 北京市柳沈律師事務所 11105
• 代理人: 侯鑒玻

一種圖像處理方法、圖像處理裝置、電子設備和存儲介質。該圖像處理方法包括：獲取輸入圖像；基于輸入圖像，確定第一圖像，第一圖像為輸入圖像中包括文本內容的區域，且文本內容中的文本在第一圖像中排列為一行；采用密集卷積網絡，對第一圖像進行特征提取，得到目標特征，該密集卷積網絡不包括池化層；基于目標特征得到文本內容；基于第一圖像和文本內容，得到第二圖像，將第二圖像替代輸入圖像中的第一圖像，以生成包括第二圖像的輸出圖像。該圖像處理方法可以在保留輸入圖像的背景的同時，使得輸入圖像中的文本內容更規整、更清晰、分辨率更高，從而增強文本內容的觀看質量；還可以較大程度地保留第一圖像的特征信息，以提高文本識別的準確性。

技術領域

本公開的實施例涉及一種圖像處理方法、圖像處理裝置、電子設備和非瞬時性存儲介質。

背景技術

隨著教育信息化的不斷發展，視頻課程在教學過程中的應用日益廣泛。例如，在進行面授課堂教學時，可以利用錄播系統實現對課堂教學內容的錄制以形成課堂教學視頻，由此，學生可以在線觀看課堂教學視頻以補習、復習相關教學內容。另外，課堂教學視頻還廣泛應用于教學評估、示范課錄制、教學觀摩、遠程教學等。

發明內容

本公開至少一個實施例提供一種圖像處理方法，包括：獲取輸入圖像；基于所述輸入圖像，確定第一圖像，所述第一圖像為所述輸入圖像中包括文本內容的區域，且所述文本內容中的文本在所述第一圖像中排列為一行；采用密集卷積網絡，對所述第一圖像進行特征提取，得到目標特征，所述密集卷積網絡不包括池化層；基于所述目標特征得到所述文本內容；基于所述第一圖像和所述文本內容，得到第二圖像；將所述第二圖像替代所述輸入圖像中的第一圖像，以生成包括所述第二圖像的輸出圖像。

例如，在本公開至少一個實施例提供的圖像處理方法中，在所述密集卷積網絡的卷積核中，至少一個卷積核在第一方向上的步長大于在第二方向上的步長。

例如，在本公開至少一個實施例提供的圖像處理方法中，在所述密集卷積網絡的卷積核中，至少一個卷積核在所述第一方向上的步長為2，并且在所述第二方向上的步長為1。

例如，在本公開至少一個實施例提供的圖像處理方法中，所述第一方向為高度方向，所述第二方向為寬度方向。

例如，在本公開至少一個實施例提供的圖像處理方法中，所述輸入圖像包括教學場景的圖像，所述文本內容包括板書內容。

例如，在本公開至少一個實施例提供的圖像處理方法中，基于所述第一圖像和所述文本內容，得到第二圖像，包括：基于所述第一圖像，確定所述第一圖像中的文本區域和非文本區域；基于所述非文本區域和所述文本區域，確定所述第二圖像的背景圖像；基于所述文本內容和所述背景圖像，得到所述第二圖像。

例如，在本公開至少一個實施例提供的圖像處理方法中，基于所述第一圖像，確定所述第一圖像中的文本區域和非文本區域，包括：對所述第一圖像進行灰度化處理，得到灰度圖像；對所述灰度圖像進行二值化處理，得到二值圖像；根據所述二值圖像確定所述第一圖像中的文本區域和非文本區域。

例如，在本公開至少一個實施例提供的圖像處理方法中，對所述灰度圖像進行二值化處理，得到二值圖像，包括：采用自適應閾值算法，對所述灰度圖像進行二值化處理，得到所述二值圖像。

例如，在本公開至少一個實施例提供的圖像處理方法中，基于所述非文本區域和所述文本區域，得到所述第二圖像的背景圖像，包括：基于所述非文本區域的各個像素值，得到第一像素值；基于所述第一像素值和所述文本區域，得到所述背景圖像。

例如，在本公開至少一個實施例提供的圖像處理方法中，所述第一像素值包括所述非文本區域的各個像素值的平均值、最大值、最小值中之一。