[發(fā)明專(zhuān)利]一種超分辨率圖像的重建方法及電子設(shè)備

有效

• 申請(qǐng)?zhí)枺?/td>: 201911030882.5
• 申請(qǐng)日: 2019-10-28
• 公開(kāi)（公告）號(hào): CN110766610B
• 公開(kāi)（公告）日: 2023-06-09
• 發(fā)明（設(shè)計(jì)）人: 劉陽(yáng)
• 申請(qǐng)（專(zhuān)利權(quán)）人: 維沃移動(dòng)通信有限公司
• 主分類(lèi)號(hào): G06T3/40
• 分類(lèi)號(hào): G06T3/40;G06T11/00;G06N3/08
• 代理公司: 北京國(guó)昊天誠(chéng)知識(shí)產(chǎn)權(quán)代理有限公司 11315
• 代理人: 張黎;許振新

1.一種超分辨率圖像重建方法，其特征在于，包括：

獲取連續(xù)采集的至少兩幀低分辨率RAW域圖像；

基于預(yù)設(shè)的超分辨率重建模型，對(duì)所述至少兩幀低分辨率RAW域圖像進(jìn)行超分辨率重建，生成單幀超分辨率RAW域圖像；

對(duì)所述單幀超分辨率RAW域圖像進(jìn)行圖像信號(hào)處理，生成單幀超分辨率RGB圖像。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述基于預(yù)設(shè)的超分辨率重建模型，對(duì)所述至少兩幀低分辨率RAW域圖像進(jìn)行超分辨率重建，生成單幀超分辨率RAW域圖像，包括：

對(duì)所述至少兩幀低分辨率RAW域圖像進(jìn)行圖像預(yù)處理，得到所述圖像預(yù)處理后的至少兩幀低分辨率RAW域圖像；

將所述圖像預(yù)處理后的至少兩幀低分辨率RAW域圖像輸入至所述預(yù)設(shè)的超分辨率重建模型，輸出所述單幀超分辨率RAW域圖像；

其中，所述圖像預(yù)處理包括如下至少一項(xiàng)：降噪操作、對(duì)齊操作。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，在所述獲取連續(xù)采集的至少兩幀低分辨率RAW域圖像之后，所述方法還包括：

獲取至少兩個(gè)高分辨率RGB視頻；

分別從所述至少兩個(gè)高分辨率RGB視頻中，截取對(duì)應(yīng)的至少兩組高分辨率RGB圖像，其中，一組高分辨率RGB圖像包括連續(xù)的至少兩幀高分辨率RGB圖像；

分別對(duì)所述至少兩組高分辨率RGB圖像進(jìn)行逆向圖像信號(hào)處理，生成對(duì)應(yīng)的至少兩組高分辨率RAW域圖像；

基于所述至少兩組高分辨率RAW域圖像，通過(guò)迭代訓(xùn)練得到所述預(yù)設(shè)的超分辨率重建模型，直到所述預(yù)設(shè)的超分辨率重建模型輸出的圖像的損失函數(shù)值最小。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，基于所述至少兩組高分辨率RAW域圖像，迭代訓(xùn)練得到所述預(yù)設(shè)的超分辨率重建模型，直到所述預(yù)設(shè)的超分辨率重建模型輸出的圖像的損失函數(shù)值最小，包括：

分別對(duì)所述至少兩組高分辨率RAW域圖像進(jìn)行降采樣，生成對(duì)應(yīng)的至少兩組低分辨率RAW域圖像；

分別對(duì)所述至少兩組低分辨率RAW域圖像進(jìn)行樣本預(yù)處理，得到所述樣本預(yù)處理后的至少兩組樣本數(shù)據(jù)，其中，每組樣本數(shù)據(jù)包括連續(xù)的至少兩幀低分辨率RAW域圖像；所述樣本預(yù)處理包括模擬抖動(dòng)操作、模擬模糊操作、模擬噪聲操作中的至少一種；

分別對(duì)所述樣本預(yù)處理后的至少兩組樣本數(shù)據(jù)進(jìn)行圖像預(yù)處理，得到所述圖像預(yù)處理后的至少兩組樣本數(shù)據(jù)，其中，所述圖像預(yù)處理包括如下至少一種：降噪操作和對(duì)齊操作；

基于所述圖像預(yù)處理后的至少兩組樣本數(shù)據(jù)，通過(guò)迭代訓(xùn)練得到所述預(yù)設(shè)的超分辨率重建模型，直到所述預(yù)設(shè)的超分辨率重建模型輸出的圖像的損失函數(shù)值最小。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述樣本預(yù)處理包括模擬抖動(dòng)操作；

所述分別對(duì)所述至少兩組低分辨率RAW域圖像進(jìn)行樣本預(yù)處理，包括：

基于透視變換參數(shù)的概率分布，預(yù)測(cè)第i組低分辨率RAW域圖像中的第2幀圖像的透視變換參數(shù)，其中，所述透視變換參數(shù)的概率分布為基于距離連續(xù)變化的不同位置處拍攝得到的至少兩幀的標(biāo)定板圖像確定的，所述第i組低分辨率RAW域圖像包括n幀低分辨率RAW域圖像；

基于n-2個(gè)透視變換參數(shù)的回歸模型，分別預(yù)測(cè)所述第i組低分辨率RAW域圖像中的第3幀圖像至第n幀圖像的透視變換參數(shù)；

基于所述第i組低分辨率RAW域圖像中的第2幀圖像至第n幀圖像的透視變換參數(shù)，對(duì)所述第i組低分辨率RAW域圖像進(jìn)行透視變換處理；

其中，所述第i組低分辨率RAW域圖像為所述至少兩組低分辨率RAW域圖像中的任意一組，n為正整數(shù)，i為正整數(shù)且i小于等于所述低分辨率RAW域圖像的組數(shù)。