[發(fā)明專(zhuān)利]一種特征融合方法、圖像去霧方法及裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 202111138532.8
• 申請(qǐng)日: 2021-09-27
• 公開(kāi)（公告）號(hào): CN115880192A
• 公開(kāi)（公告）日: 2023-03-31
• 發(fā)明（設(shè)計(jì)）人: 董航
• 申請(qǐng)（專(zhuān)利權(quán)）人: 北京字跳網(wǎng)絡(luò)技術(shù)有限公司
• 主分類(lèi)號(hào): G06T5/50
• 分類(lèi)號(hào): G06T5/50;G06T5/00
• 代理公司: 北京開(kāi)陽(yáng)星知識(shí)產(chǎn)權(quán)代理有限公司 11710
• 代理人: 唐博

1.一種特征融合方法，其特征在于，包括：

獲取目標(biāo)特征和至少一個(gè)待融合特征，所述目標(biāo)特征和所述至少一個(gè)待融合特征分別為同一圖像的不同空間尺度的特征；

將所述目標(biāo)特征劃分為第一特征和第二特征；

基于殘差稠密塊RDB對(duì)所述第一特征進(jìn)行處理，獲取第三特征；

對(duì)所述第二特征和所述至少一個(gè)待融合特征進(jìn)行融合，獲取第四特征；

合并所述第三特征和所述第四特征，生成所述目標(biāo)特征和至少一個(gè)待融合特征的融合結(jié)果。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對(duì)所述第二特征和所述至少一個(gè)待融合特征進(jìn)行融合，獲取第四特征，包括：

按照各待融合特征的空間尺度與所述第二特征的空間尺度的差值對(duì)所述至少一個(gè)待融合特征進(jìn)行降序排序，獲取排序結(jié)果；

對(duì)所述排序結(jié)果中的第一個(gè)待融合特征和所述第二特征進(jìn)行融合，生成所述第一個(gè)待融合特征的融合結(jié)果；

逐一對(duì)所述排序結(jié)果中的其它待融合特征和上一個(gè)待融合特征的融合結(jié)果進(jìn)行融合，生成所述排序結(jié)果中的最后一個(gè)待融合特征的融合結(jié)果；

將所述排序結(jié)果中的最后一個(gè)待融合特征的融合結(jié)果作為所述第四特征。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述對(duì)所述排序結(jié)果中的第一個(gè)待融合特征和所述第二特征進(jìn)行融合，生成所述第一個(gè)待融合特征的融合結(jié)果，包括：

將所述第二特征采樣為與所述第一個(gè)待融合特征空間尺度相同的特征，生成所述第一個(gè)待融合特征對(duì)應(yīng)的第一采樣特征；

計(jì)算所述第一個(gè)待融合特征對(duì)應(yīng)的第一采樣特征和所述第一個(gè)待融合特征的差值，獲取所述第一個(gè)待融合特征對(duì)應(yīng)的特征差；

將所述第一個(gè)待融合特征對(duì)應(yīng)的特征差采樣為與所述第二特征空間尺度相同的特征，獲取所述第一個(gè)待融合特征對(duì)應(yīng)的第二采樣特征；

對(duì)所述第二特征和所述第一個(gè)待融合特征對(duì)應(yīng)的第二采樣特征進(jìn)行相加融合，生成所述第一個(gè)待融合特征的融合結(jié)果。

4.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述逐一對(duì)所述排序結(jié)果中的其它待融合特征和上一個(gè)待融合特征的融合結(jié)果進(jìn)行融合，包括：

將所述排序結(jié)果中的第m-1個(gè)待融合特征的融合結(jié)果采樣為與所述排序結(jié)果中的第m個(gè)待融合特征空間尺度相同的特征，生成所述第m個(gè)待融合對(duì)應(yīng)的第一采樣特征，m為大于1的正整數(shù)；

計(jì)算所述第m個(gè)待融合特征與所述第m個(gè)待融合對(duì)應(yīng)的第一采樣特征的差值，獲取所述第m個(gè)待融合特征對(duì)應(yīng)的特征差；

將所述第m個(gè)待融合特征對(duì)應(yīng)的特征差采樣為與所述第m-1個(gè)待融合特征的融合結(jié)果空間尺度相同的特征，獲取所述第m個(gè)待融合特征對(duì)應(yīng)的第二采樣特征；

對(duì)所述第m-1個(gè)待融合特征的融合結(jié)果和所述第m個(gè)待融合特征對(duì)應(yīng)的第二采樣特征進(jìn)行相加融合，生成所述第m個(gè)待融合特征的融合結(jié)果。

5.根據(jù)權(quán)利要求1-4任一項(xiàng)所述的方法，其特征在于，所述將所述目標(biāo)特征劃分為第一特征和第二特征，包括：

基于所述目標(biāo)特征的特征通道將所述目標(biāo)特征劃分為第一特征和第二特征。

6.一種圖像去霧方法，其特征在于，包括：

通過(guò)編碼模塊對(duì)目標(biāo)圖像進(jìn)行處理，獲取編碼特征；其中，所述編碼模塊包括L個(gè)級(jí)聯(lián)的且空間尺度均不相同的編碼器，第m個(gè)編碼器用于通過(guò)權(quán)利要求1-5任一項(xiàng)所述的特征融合方法融合所述編碼模塊在所述第m個(gè)編碼器上的圖像特征和所述第m個(gè)編碼器之前的所有編碼器輸出的融合結(jié)果，生成所述第m個(gè)編碼器的融合結(jié)果，并將所述第m個(gè)編碼器的融合結(jié)果輸出至所述第m個(gè)編碼器之后的所有編碼器，L、m均為正整數(shù)，且m≤L；

通過(guò)由至少一個(gè)殘差塊RDB構(gòu)成的特征復(fù)原模塊對(duì)所述編碼特征進(jìn)行處理，獲取復(fù)原特征；

通過(guò)解碼模塊對(duì)所述復(fù)原特征進(jìn)行處理，獲取所述目標(biāo)圖像去霧效果圖像；其中，所述解碼模塊包括L個(gè)級(jí)聯(lián)的且空間尺度均不相同的解碼器，第m個(gè)解碼器用于通過(guò)權(quán)利要求1-5任一項(xiàng)所述的特征融合方法融合所述編碼模塊在所述第m個(gè)編碼器上的圖像特征和所述第m個(gè)解碼器之前的所有解碼器輸出的融合結(jié)果，生成所述第m個(gè)解碼器的融合結(jié)果，并將所述第m個(gè)解碼器的融合結(jié)果輸出至所述第m個(gè)解碼器之后的所有解碼器。