[發明專利]用于對有噪輸入圖像進行分辨率上調的方法和裝置

有效

• 申請號: 201610982198.7
• 申請日: 2016-11-08
• 公開（公告）號: CN107016642B
• 公開（公告）日: 2022-08-16
• 發明（設計）人: 曼格什·科蘇;喬迪·薩瓦多瑪科斯
• 申請（專利權）人: 交互數字麥迪遜專利控股公司
• 主分類號: G06T3/40
• 分類號: G06T3/40;G06T5/00;G06T5/50
• 代理公司: 中科專利商標代理有限責任公司 11021
• 代理人: 潘劍穎

在利用已知的關于有噪圖像的圖像分辨率上調方法的情況下，在去噪期間丟失重要的細節信息。一種用于對有噪輸入圖像進行分辨率上調的方法(100)包括：對有噪輸入圖像進行分辨率上調以獲得有噪高分辨率(HR)圖像，對有噪輸入圖像進行去噪(30)以獲得去噪低分辨率(LR)圖像，對去噪LR圖像進行分辨率上調(40)以獲得經分辨率上調的去噪LR圖像，以及將有噪HR圖像與經分辨率上調的去噪LR圖像進行組合(50)以生成去噪HR圖像。

技術領域

本發明涉及一種用于對圖像進行分辨率上調(upscaling)的方法和一種用于對圖像進行分辨率上調的裝置。

背景技術

圖像超分辨率是根據低分辨率(LR)圖像生成放大的高分辨率(HR)圖像的任務。該放大的圖像應當保留LR圖像的高頻(HF)內容。通常，通過首先去噪然后分辨率上調來根據有噪LR圖像獲得HR圖像。

WO2015121422A公開了一種噪聲感知單圖像超分辨率(SI-SR)算法，其在添加從較低分辨率學習的細節的同時自動地消除加性噪聲。與常規的SI-SR技術相反，該方法不假設輸入圖像是清楚的示例源。相反，該方法利用最近且有效的就地跨分比率自相似性先知(prior)，用于學習精細細節示例以補充基于內插的經分辨率上調的圖像分塊并減少圖像噪聲。

在EP3086280中，首先通過內插獲得超分辨圖像的粗略估計。然后，對經分辨率上調的圖像的每個分塊進行平均減法和歸一化，以自上而下遍歷在離線訓練期間獲得的若干獨立的分級非線性映射函數。在每個自上而下遍歷期間，映射中的分層模式與歸一化分塊之間的相似性被組合，并且選擇具有最佳相似性的映射，從而提高通過利用單一映射的替代解決方案實現的質量。然后，通過對應于所選擇的映射中的所得到的線性化的局部線性映射來處理經平均減法的分塊，并將其添加到粗略分塊。

[Dabov2007]公開了通過兩步法的圖像去噪，其中每個步驟包括通過塊匹配對相似分塊的分組、3D變換、協同濾波級、以及對重構圖像的逆3D變換和構圖。在第一級期間，協同濾波器使用硬閾值設定，而在第二級期間，使用更精細的維納(Wiener)去噪濾波器。閾值和濾波器系數的選擇需要知道噪聲水平。

[Dong2014]使用基于具有多個層的卷積神經網絡(CNN)的方法來對圖像進行分辨率上調的方案。

發明內容

已知的圖像分辨率上調方法的問題是當輸入圖像有噪時，在去噪期間丟失重要的細節信息，這在分辨率上調期間難以恢復。

本發明提供了一種用于改善有噪圖像的分辨率上調的解決方案。

在一個實施例中，一種用于對有噪輸入圖像進行分辨率上調的方法包括：對有噪輸入圖像進行分辨率上調以獲得有噪高分辨率(HR)圖像；對有噪輸入圖像進行去噪以獲得去噪低分辨率(LR)圖像；對去噪LR圖像進行分辨率上調以獲得經分辨率上調的去噪LR圖像，以及對有噪HR圖像和經分辨率上調的去噪LR圖像進行組合，以生成去噪HR圖像。

本發明還提供了一種利用該方法的裝置。

根據一個實施例，計算機可讀介質具有使計算機執行如實施例中所公開的方法的可執行指令。

根據一個實施例，一種用于分辨率上調的裝置包括至少一個硬件組件和非瞬時性有形計算機可讀存儲介質，該非瞬時性有形計算機可讀存儲介質有形地具體實現至少一個軟件組件，當該至少一個軟件組件在所述至少一個硬件組件上執行時，使該至少一個硬件組件執行如實施例中所公開的方法。

在一個實施例中，至少一個硬件組件包括至少一個硬件處理器。

當結合附圖考慮以下描述和所附權利要求時，本發明的其他目的、特征和優點將變得顯而易見。

附圖說明

參考附圖描述了本發明的示例性實施例，在附圖中示出了：

圖1：圖像分辨率上調方法的流程圖；