[發明專利]圖像處理方法及裝置

在審

• 申請號: 202010572461.1
• 申請日: 2020-06-22
• 公開（公告）號: CN111738951A
• 公開（公告）日: 2020-10-02
• 發明（設計）人: 孫佳;袁澤寰;王長虎
• 申請（專利權）人: 北京字節跳動網絡技術有限公司
• 主分類號: G06T5/00
• 分類號: G06T5/00;G06T3/40
• 代理公司: 北京竹辰知識產權代理事務所(普通合伙) 11706
• 代理人: 聶鵬

1.一種圖像處理方法，其特征在于，包括：

從視頻中獲取一幀圖像；

當所述圖像的分辨率大于所述預設分辨率時，對所述圖像進行降噪處理，得到去噪圖像；

當所述圖像的分辨率小于或等于預設分辨率時，對所述圖像進行超分辨率重建，得到所述圖像對應的高分辨率圖像；

對所述高分辨率圖像或所述去噪圖像進行色彩修復，得到最終圖像。

2.根據權利要求1所述的方法，其特征在于，所述當所述圖像的分辨率大于所述預設分辨率時，對所述圖像進行降噪處理，得到去噪圖像，包括：

當所述圖像的分辨率大于所述預設分辨率時，確定所述圖像的高斯噪聲的功率譜密度；

根據所述高斯噪聲的功率譜密度確定所述圖像的模糊程度；

根據所述模糊程度對所述圖像進行自適應去噪，得到去噪圖像。

3.根據權利要求1所述的方法，其特征在于，所述當所述圖像的分辨率小于或等于預設分辨率時，對所述圖像進行超分辨率重建，得到所述圖像對應的高分辨率圖像，包括：

獲取位于所述圖像前的m幀圖像和所述圖像后的n幀圖像；

將所述圖像、所述m幀圖像、所述n幀圖像輸入超分辨率重建網絡；

在所述超分辨率重建網絡中，根據所述圖像、所述m幀圖像、所述n幀圖像進行高分辨率重建，得到所述圖像對應的高分辨率圖像。

4.根據權利要求3所述的方法，其特征在于，所述在所述超分辨率重建網絡中，根據所述圖像、所述m幀圖像、所述n幀圖像進行高分辨率重建，得到所述圖像對應的高分辨率圖像，包括：

在所述超分辨率重建網絡中，根據所述圖像、所述m幀圖像、所述n幀圖像進行高分辨率重建，得到初始高分辨率圖像；

在所述超分辨率重建網絡中，確定所述初始高分辨率圖像中像素間的平滑性，直至所述平滑性滿足所述像素間平滑約束條件，結束高分辨率重建過程，得到最終的高分辨率圖像。

5.根據權利要求1所述的方法，其特征在于，所述對所述高分辨率圖像或所述去噪圖像進行色彩修復，得到最終圖像，包括：

確定所述高分辨率圖像或所述去噪圖像中每個像素點的原始亮度；

根據所述高分辨率圖像或所述去噪圖像中每個像素點的原始亮度確定所述高分辨率圖像或所述去噪圖像的平均亮度和最大亮度；

根據所述每個像素點的原始亮度、所述平均亮度和所述最大亮度確定每個像素點的最終亮度；

根據所述每個像素點的最終亮度得到最終圖像。

6.根據權利要求1所述的方法，其特征在于，所述根據所述每個像素點的原始亮度確定所述高分辨率圖像或所述去噪圖像的平均亮度，包括：

通過公式確定所述高分辨率圖像或所述去噪圖像的平均亮度；其中，L(x，y)為像素點(x，y)的原始亮度，為所述平均亮度，σ為常數，m*n為所述高分辨率圖像或所述去噪圖像的寬度和高度，exp()為以自然常數e為底的指數函數，log()為求對數運算。

7.根據權利要求6所述的方法，其特征在于，所述根據每個像素點的原始亮度、所述平均亮度和所述最大亮度確定所述每個像素點的最終亮度，包括：

通過公式確定每個像素點的最終亮度；其中，L_max為所述最大亮度，L為所述最終亮度，L(x，y)為像素點(x，y)的原始亮度。

8.根據權利要求1-7任一項所述的方法，其特征在于，所述方法還包括：

獲取所述視頻的壓制格式；

當所述壓制格式為隔行掃描時，采用反交錯方式對所述視頻進行去隔行處理。

9.根據權利要求1-7任一項所述的方法，其特征在于，所述方法還包括：

當所述視頻的編碼格式為舊編碼格式時，對所述視頻進行轉碼處理，得到最新編碼格式的視頻。