[發明專利]一種超分辨率圖像處理方法以及相關裝置

在審

• 申請號: 201911252760.0
• 申請日: 2019-12-09
• 公開（公告）號: CN113034358A
• 公開（公告）日: 2021-06-25
• 發明（設計）人: 林煥;陳濛;周琛暉
• 申請（專利權）人: 華為技術有限公司
• 主分類號: G06T3/40
• 分類號: G06T3/40
• 代理公司: 深圳市深佳知識產權代理事務所(普通合伙) 44285
• 代理人: 聶秀娜

1.一種超分辨率圖像處理方法，其特征在于，包括：

根據低分辨率圖像生成細節豐富圖像塊和細節不豐富圖像塊，其中，所述細節豐富圖像塊和所述細節不豐富圖像塊的尺寸小于所述低分辨率圖像，所述細節豐富圖像塊包括的圖像特征信息的數量大于所述細節不豐富圖像塊包括的圖像特征信息的數量；

根據所述細節豐富圖像塊確定相似圖像塊，其中，所述相似圖像塊包括的圖像特征信息與所述細節豐富圖像塊包括的圖像特征信息的相似度大于第一閾值；

對所述相似圖像塊和所述低分辨率圖像進行超分辨率處理，生成超分辨率圖像，其中，所述相似圖像塊作為所述低分辨率圖像的參考圖。

2.根據權利要求1所述的方法，其特征在于，所述根據所述低分辨率圖像生成所述細節豐富圖像塊和所述細節不豐富圖像塊，包括：

根據所述低分辨率圖像生成圖像塊集合；

對所述圖像塊集合中的圖像塊進行卷積處理，生成第一卷積數據集；

對所述第一卷積數據集進行二分類處理，確定所述細節豐富圖像塊和所述細節不豐富圖像塊。

3.根據權利要求2所述的方法，其特征在于，所述根據所述細節豐富圖像塊確定所述相似圖像塊，包括：

根據所述細節豐富圖像塊，確定所述細節豐富圖像塊對應的圖像特征數據集；

對確定的所述圖像特征數據集進行二值化處理，得到所述細節豐富圖像塊中任意兩個圖像塊的相似度；

當所述任意兩個圖像塊的相似度大于所述第一閾值時，確定所述相似圖像塊。

4.根據權利要求3所述的方法，其特征在于，所述任意兩個圖像塊的相似度滿足：

其中，所述F為所述相似度，所述N為所述細節豐富圖像塊的圖像尺寸，所述P(i,j)和Q(i，j)為所述任意兩個細節豐富圖像塊分別對應的所述圖像塊的所述特征圖，所述i為所述圖像塊的所述特征圖像素的橫坐標值，所述j為所述圖像塊的所述特征圖像素的縱坐標值。

5.根據權利要求1所述的方法，其特征在于，當所述低分辨率圖像為視頻中的一幀時，所述根據所述細節豐富圖像塊確定所述相似圖像塊，包括：

確定所述低分辨率圖像在所述視頻中的位置；

根據所述位置，確定第二圖像幀，其中，所述第二圖像幀為所述低分辨率圖像在所述視頻中的相鄰幀；

確定所述第二圖像幀中與所述細節豐富圖像塊對應位置的圖像塊為所述相似圖像塊。

6.根據權利要求3-5中任一項所述的方法，其特征在于，所述對所述相似圖像塊和所述低分辨率圖像進行超分辨率處理，生成所述超分辨率圖像，包括：

對所述細節豐富圖像塊和所述相似圖像塊進行圖像交換處理，生成第一交換圖像；

根據所述相似圖像塊，確定所述相似圖像塊的特征圖，并對所述相似圖像塊的特征圖和所述低分辨率圖像塊的特征圖進行圖像交換處理，生成第二交換圖像，其中所述特征圖用于指示圖像塊的圖像特征信息；

對所述第一交換圖像、所述第二交換圖像和所述低分辨率圖像進行超分辨率處理，生成第一圖像；

根據所述第一圖像生成所述超分辨率圖像。

7.根據權利要求6所述的方法，其特征在于，所述根據所述第一圖像生成所述超分辨率圖像，包括：

獲取高清圖像，所述高清圖像的分辨率大于所述低分辨率圖像的分辨率；

對所述細節不豐富圖像塊進行放大處理以生成放大圖像，其中所述放大處理包括雙三次插值處理；

對所述高清圖像、所述放大圖像和所述第一圖像進行超分辨率處理，生成所述超分辨率圖像，其中，所述高清圖像和所述放大圖像作為所述第一圖像的參考圖。

8.根據權利要求7所述的方法，其特征在于，所述高清圖像來自遠端設備，所述高清圖像為所述遠端設備通過對所述低分辨率圖像進行超分辨率處理生成的圖像。

9.根據權利要求7所述的方法，其特征在于，所述高清圖像來自預置高清圖庫，所述預置高清圖庫中包括至少一張所述高清圖像。