[發明專利]圖像處理方法、裝置及電子設備

在審

• 申請號: 202110319786.3
• 申請日: 2021-03-25
• 公開（公告）號: CN113096011A
• 公開（公告）日: 2021-07-09
• 發明（設計）人: 蔡曉霞;丁予康;黃曉政;聞興;于冰
• 申請（專利權）人: 北京達佳互聯信息技術有限公司
• 主分類號: G06T3/40
• 分類號: G06T3/40;G06N3/04
• 代理公司: 北京銀龍知識產權代理有限公司 11243
• 代理人: 黃燦;劉念

本公開關于一種圖像處理方法、裝置及電子設備，包括：對第一圖像進行特征提取，獲得所述第一圖像對應的N個特征圖像，N為正整數；針對所述N個特征圖像中每個特征圖像，基于預設量化精度對所述特征圖像中的特征信息進行重排，生成所述特征圖像對應的K個第一待重排特征圖像，K為大于1的正整數；基于分辨率放大參數和所述K個第一待重排特征圖像，生成所述特征圖像的目標放大特征圖像；對所述N個特征圖像的目標放大特征圖像進行特征合成，生成第二圖像；其中，所述第二圖像的分辨率高于所述第一圖像。本公開可以提高圖像分辨率的放大能力。

技術領域

本公開涉及圖像處理技術領域，尤其涉及一種圖像處理方法、裝置及電子設備。

背景技術

超分辨率視頻增強一般是指：對輸入低分辨率視頻，利用傳統圖像處理算法、傳統機器學習方法乃至深度學習方法將低分辨率視頻放大至高分辨率視頻的過程。目前，通常采用基于深度學習的超分網絡進行超分辨率視頻增強，且基于深度學習的超分網絡處理流程中可以后置上采樣結構將輸入圖像放大至所需要的尺寸。

后置上采樣結構指的是將圖像的特征圖像利用反卷積網絡將圖像信息進行綜合，以得到高分辨率圖像。然而，后置上采樣結構中的上采樣模塊受限于反卷積網絡的結構特性，通常只能進行整數倍的上采樣，如此，現有技術中超分辨率視頻增強存在圖像分辨率的放大能力比較差的問題。

發明內容

本公開提供一種圖像處理方法、裝置及電子設備，以至少解決相關技術中超分辨率視頻增強存在圖像分辨率的放大能力比較差的問題。本公開的技術方案如下：

根據本公開實施例的第一方面，提供一種圖像處理方法，包括：

對第一圖像進行特征提取，獲得所述第一圖像對應的N個特征圖像，N為正整數；

針對所述N個特征圖像中每個特征圖像，基于預設量化精度對所述特征圖像中的特征信息進行重排，生成所述特征圖像對應的K個第一待重排特征圖像，K為大于1的正整數；

基于分辨率放大參數和所述K個第一待重排特征圖像，生成所述特征圖像的目標放大特征圖像；

對所述N個特征圖像的目標放大特征圖像進行特征合成，生成第二圖像；其中，所述第二圖像的分辨率高于所述第一圖像。

可選的，所述針對所述N個特征圖像中每個特征圖像，基于預設量化精度對所述特征圖像中的特征信息進行重排，生成所述特征圖像對應的K個第一待重排特征圖像的步驟包括：

針對所述N個特征圖像中每個特征圖像，基于所述預設量化精度對所述特征圖像中第一方向上的特征信息進行重排，生成所述特征圖像對應的K個第一待重排特征圖像。

可選的，所述基于分辨率放大參數和所述K個第一待重排特征圖像，生成所述特征圖像的目標放大特征圖像的步驟包括：

基于分辨率放大參數，從所述K個第一待重排特征圖像中獲取第一目標特征信息；

基于所述第一目標特征信息，生成所述特征圖像的第一放大特征圖像；

基于所述分辨率放大參數和第一放大特征圖像，生成所述特征圖像的目標放大特征圖像。

可選的，所述基于所述分辨率放大參數和第一放大特征圖像，生成所述特征圖像的目標放大特征圖像的步驟包括：

基于所述預設量化精度對所述第一放大特征圖像中第二方向上的特征信息進行重排，生成所述第一放大特征圖像對應的多個第二待重排特征圖像；其中，所述第一方向和所述第二方向為兩個相互垂直的方向；

基于所述分辨率放大參數，從所述多個第二待重排特征圖像中獲取第二目標特征信息；

基于所述第二目標特征信息，生成所述特征圖像的目標放大特征圖像。