[發明專利]圖像處理裝置和方法

有效

• 申請號: 201780092720.7
• 申請日: 2017-06-28
• 公開（公告）號: CN110832541B
• 公開（公告）日: 2022-10-04
• 發明（設計）人: 法赫德·布扎拉;奧納伊·優厄法利歐格路;伊布拉希姆·哈法奧
• 申請（專利權）人: 華為技術有限公司
• 主分類號: G06T5/50
• 分類號: G06T5/50
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 張月婷

1.一種圖像處理裝置(300)，用于根據包括第一低動態范圍LDR圖像和第二LDR圖像在內的多個LDR圖像生成高動態范圍HDR圖像，其中，所述第一LDR圖像與第一視圖和第一曝光相關，所述第二LDR圖像與第二視圖和第二曝光相關，其中，所述第一視圖與所述第二視圖不相同，所述第一曝光的曝光率低于所述第二曝光的曝光率，其特征在于，所述圖像處理裝置(300)包括：

處理單元(301)，用于提供神經網絡，其中所述神經網絡包括多個神經子網絡，其中包含第一神經子網絡(303)，所述第一神經子網絡(303)用于根據以下內容生成所述HDR圖像：(i)所述第一LDR圖像，(ii)所述第二LDR圖像，以及(iii)修改的第一LDR圖像，其中所述修改的第一LDR圖像與所述第一視圖和所述第二曝光相關；

其中，所述多個神經子網絡包括第二神經子網絡(305)，用于根據(i)所述第一LDR圖像和(ii)所述第二LDR圖像，通過將所述第一LDR圖像映射到所述第二曝光來生成所述修改的第一LDR圖像。

2.根據權利要求1所述的圖像處理裝置(300)，其特征在于，所述多個LDR圖像還包括與第三視圖和第三曝光相關的第三LDR圖像，所述第二神經子網絡(305)包括第一部分(305a)和第二部分(305b)，其中

所述第二神經子網絡(305)的所述第一部分(305a)用于：根據(i)所述第一LDR圖像和(ii)所述第二LDR圖像，通過將所述第一LDR圖像映射到所述第二曝光來生成所述修改的第一LDR圖像，以及

所述第二神經子網絡(305)的所述第二部分(305b)用于：根據(i)所述第一LDR圖像和(ii)所述第三LDR圖像，通過將所述第一LDR圖像映射到所述第三曝光來生成進一步修改的第一LDR圖像，其中所述進一步修改的第一LDR圖像與所述第一視圖和所述第二曝光相關。

3.根據前述權利要求2所述的圖像處理裝置(300)，其特征在于，所述多個神經子網絡包括第三神經子網絡(307)，用于通過根據以下內容從所述HDR圖像中去除重像偽影來提供所述HDR圖像的改進版本：(i)所述第一LDR圖像，(ii)所述第二LDR圖像，(iii)所述修改的第一LDR圖像，(iv)所述HDR圖像，以及(v)去重影引導的HDR圖像。

4.根據權利要求3所述的圖像處理裝置(300)，其特征在于，所述處理單元(301)還用于提供曝光融合單元(309)，用于基于(i)所述第一LDR圖像和(ii)所述第二LDR圖像，根據曝光融合方案生成所述去重影引導的HDR圖像。

5.根據權利要求4所述的圖像處理裝置(300)，其特征在于，所述曝光融合單元(309)用于根據所述曝光融合方案，通過使用基于一個或多個質量度量的權重圖執行(i)所述第一LDR圖像和(ii)所述第二LDR圖像的加權融合，來生成所述去重影引導的HDR圖像。

6.根據前述權利要求1-5中的任一項所述的圖像處理裝置(300)，其特征在于，所述多個神經子網絡中的每一個包括一個或多個卷積層以及一個或多個去卷積層。

7.根據前述權利要求1-5中的任一項所述的圖像處理裝置(300)，其特征在于，所述神經網絡用于根據多個訓練集進行訓練，其中每個訓練集包括一個HDR圖像和多個LDR圖像，并且至少部分訓練集包括不止兩個LDR圖像。

8.根據前述權利要求1-5中的任一項所述的圖像處理裝置(300)，其特征在于，所述第一神經子網絡(303)還包括加權層，用于基于一個或多個質量度量生成權重圖，以便在生成所述HDR圖像時降低所述第一LDR圖像和所述第二LDR圖像的低質量區域的影響。

9.根據前述權利要求1-5中的任一項所述的圖像處理裝置(300)，其特征在于，所述處理單元(301)還用于根據參考圖像選擇的質量度量，從所述多個LDR圖像中選擇所述第一LDR圖像作為參考圖像。