[發明專利]圖像超分辨率處理方法和裝置、電子設備

在審

• 申請號: 202110685262.6
• 申請日: 2021-06-21
• 公開（公告）號: CN113421189A
• 公開（公告）日: 2021-09-21
• 發明（設計）人: 鄭超;范澤華
• 申請（專利權）人: OPPO廣東移動通信有限公司
• 主分類號: G06T3/40
• 分類號: G06T3/40;G06T5/00;G06T5/50;G06T7/11;G06T7/194;G06K9/46;G06K9/62
• 代理公司: 廣州華進聯合專利商標代理有限公司 44224
• 代理人: 毛丹

1.一種圖像超分辨率處理方法，應用于超分辨率處理芯片，其特征在于，包括：

獲取待處理圖像；

基于所述待處理圖像的圖像復雜度確定所述待處理圖像對應的目標分割方式，根據目標分割方式對所述待處理圖像進行分割得到對應的至少兩個分割子圖像；

將所述分割子圖像分別輸入至少兩個超分辨率電路模塊，所述超分辨率電路模塊對所述分割子圖像塊進行并行超分辨率處理；

各個超分辨率電路模塊分別獲取與輸入的分割子圖像的分割類別匹配的超分辨率處理模式；

根據與分割子圖像的分割類別匹配的超分辨率處理模式對分割子圖像進行超分辨率處理，得到各個分割子圖像對應的超分辨率分割子圖像；

將各個超分辨率分割子圖像進行合成得到所述待處理圖像對應的目標超分辨率圖像。

2.根據權利要求1所述的方法，其特征在于，所述基于所述待處理圖像的圖像復雜度確定所述待處理圖像對應的目標分割方式，根據目標分割方式對所述待處理圖像進行分割得到對應的至少兩個分割子圖像包括：

若根據所述待處理圖像的圖像復雜度判定所述待處理圖像屬于單一畫面圖像，則對所述待處理圖像進行等分圖像分割，得到相同面積的至少兩個分割子圖像，所述單一畫面圖像對應的圖像復雜度小于第一預設閾值。

3.根據權利要求2所述的方法，其特征在于，所述基于所述待處理圖像的圖像復雜度確定所述待處理圖像對應的目標分割方式，根據目標分割方式對所述待處理圖像進行分割得到對應的至少兩個分割子圖像包括：

若根據所述待處理圖像的圖像復雜度判定所述待處理圖像屬于非單一畫面圖像，則對所述待處理圖像進行場景語義分割，得到對應不同語義類別的至少兩個分割子圖像，其中所述單一畫面圖像對應的圖像復雜度小于所述非單一畫面圖像對應的圖像復雜度。

4.根據權利要求1所述的方法，其特征在于，所述獲取待處理圖像之前，包括：

通過云端數據庫獲取低分辨率的第一圖片集和對應的高分辨率的第二圖片集，所述第一圖片集中的第一圖片在所述第二圖片集中存在相同內容的對應的第二圖片，所述第一圖片集中存在不同語義類別的第一圖片；

所述云端數據庫通過對第一圖片和相同內容的第二圖片的差異進行算法擬合，模擬各個第一圖片從低分辨率超分至高分辨率的第二圖片的目標超分辨率處理模式，得到不同語義類別的圖片對應的目標超分辨率處理模式；

將不同語義類別和對應的目標超分辨率處理模式燒錄至所述超分辨率處理芯片的智能圖像處理模塊。

5.根據權利要求4所述的方法，其特征在于，所述分割類別為所述語義類別中的一種，所述各個超分辨率電路模塊分別獲取與輸入的分割子圖像的分割類別匹配的超分辨率處理模式，根據與分割子圖像的分割類別匹配的超分辨率處理模式對分割子圖像進行超分辨率處理，得到各個分割子圖像對應的超分辨率分割子圖像包括：

各個超分辨率電路模塊接收智能圖像處理模塊傳遞的與目標超分辨率處理模式匹配的超分辨率圖像處理指令，根據所述超分辨率圖像處理指令對分割子圖像進行超分辨率處理，得到各個分割子圖像對應的超分辨率分割子圖像；

其中所述目標超分辨率處理模式是所述智能圖像處理模塊根據超分辨率電路模塊輸入的分割子圖像的分割類別確定的。

6.根據權利要求1所述的方法，其特征在于，所述各個超分辨率電路模塊分別獲取與輸入的分割子圖像的分割類別匹配的超分辨率處理模式包括：

若分割子圖像為前景主體類別，則超分辨率電路模塊獲取的與前景主體類別匹配的超分辨率處理模式的復雜度與分割子圖像對應的前景主體在所述待處理圖像的重要度成正比關系；

若分割子圖像為背景類別，則超分辨率電路模塊獲取的與背景類別匹配的超分辨率處理模式的復雜度小于前景主體類別對應的超分辨率處理模式的復雜度。

7.根據權利要求2所述的方法，其特征在于，所述各個超分辨率電路模塊分別獲取與輸入的分割子圖像的分割類別匹配的超分辨率處理模式包括：

若分割子圖像為對所述待處理圖像進行等分圖像分割得到的，則各個超分辨率電路模塊分別獲取的與輸入的分割子圖像的分割類別匹配的超分辨率處理模式的復雜度相同。