[發(fā)明專利]一種特征融合方法、圖像去霧方法及裝置

在審

• 申請?zhí)枺?/td>: 202111138532.8
• 申請日: 2021-09-27
• 公開（公告）號: CN115880192A
• 公開（公告）日: 2023-03-31
• 發(fā)明（設(shè)計）人: 董航
• 申請（專利權(quán)）人: 北京字跳網(wǎng)絡(luò)技術(shù)有限公司
• 主分類號: G06T5/50
• 分類號: G06T5/50;G06T5/00
• 代理公司: 北京開陽星知識產(chǎn)權(quán)代理有限公司 11710
• 代理人: 唐博

本發(fā)明實施例提供了一種特征融合方法、圖像去霧方法及裝置，涉及圖像處理技術(shù)領(lǐng)域。該方法包括：獲取目標(biāo)特征和至少一個待融合特征，所述目標(biāo)特征和所述至少一個待融合特征分別為同一圖像的不同空間尺度的特征；將所述目標(biāo)特征劃分為第一特征和第二特征；基于殘差稠密塊RDB對所述第一特征進(jìn)行處理，獲取第三特征；對所述第二特征和所述至少一個待融合特征進(jìn)行融合，獲取第四特征；合并所述第三特征和所述第四特征，生成所述目標(biāo)特征和至少一個待融合特征的融合結(jié)果。本發(fā)明實施例用于解決現(xiàn)有技術(shù)中的多尺度特征融合方式會限制網(wǎng)絡(luò)架構(gòu)中的特征的多樣性的問題。

技術(shù)領(lǐng)域

本發(fā)明涉及圖像處理技術(shù)領(lǐng)域，尤其涉及一種特征融合方法、圖像去霧方法及裝置。

背景技術(shù)

圖像去霧是一個經(jīng)典的圖像處理問題。圖像去霧的主要目的是對有霧圖像進(jìn)行修復(fù)，從而獲取出清晰無霧的圖像。由于在各種高級計算機(jī)視覺任務(wù)(圖像檢測、圖像識別等)中首先需要對圖像進(jìn)行去霧處理得到清晰的圖像才能進(jìn)行，因此圖像去霧問題在計算機(jī)視覺界受到了廣泛重視。

在圖像去霧領(lǐng)域，輸入圖像內(nèi)部一般都存在著大量的冗余信息，充分的利用這些冗余信息可以有效的提升圖像修復(fù)的效果。為了能夠充分的利用這些冗余信息，需要從圖像不同位置提取這些冗余信息，因此深度學(xué)習(xí)網(wǎng)絡(luò)的感受野成為了一個重要的設(shè)計標(biāo)準(zhǔn)。為了擴(kuò)大深度學(xué)習(xí)網(wǎng)的感受野，多尺度網(wǎng)絡(luò)在圖像去霧領(lǐng)域被廣泛應(yīng)用并取得了不錯的效果。雖然多尺度網(wǎng)絡(luò)通過提取和利用來自不同尺度的特征，提升了圖像去霧的整體性能，但是多尺度網(wǎng)絡(luò)架構(gòu)存在圖像特征下采樣過程中會丟失圖像特征的空間信息、非相鄰網(wǎng)絡(luò)層間的不同尺度的特征之間缺少足夠的聯(lián)系等問題。對多尺度的特征進(jìn)行融合，提升網(wǎng)絡(luò)特征的復(fù)用程度，已經(jīng)在眾多深度學(xué)習(xí)架構(gòu)中被證明是一種有效地提升網(wǎng)絡(luò)性能的手段。目前使用較為廣泛的一種多尺度特征融合方式為：基于重投影技術(shù)的多尺度特征融合方式。然而，雖然基于重投影技術(shù)的多尺度特征融合方式能夠?qū)崿F(xiàn)多尺度特征融合，但重投影技術(shù)會限制不同尺度特征間的內(nèi)容，在多尺度特征融合時限制了生成特征的多樣性，進(jìn)而影響圖像去霧的學(xué)習(xí)能力。

發(fā)明內(nèi)容

有鑒于此，本發(fā)明提供了一種特征融合方法、圖像去霧方法及裝置，用于解決現(xiàn)有技術(shù)中的多尺度特征融合方式會限制網(wǎng)絡(luò)架構(gòu)中的特征的多樣性的問題。

為了實現(xiàn)上述目的，本發(fā)明實施例提供技術(shù)方案如下：

第一方面，本發(fā)明的實施例提供了一種特征融合方法，包括：

獲取目標(biāo)特征和至少一個待融合特征，所述目標(biāo)特征和所述至少一個待融合特征分別為同一圖像的不同空間尺度的特征；

將所述目標(biāo)特征劃分為第一特征和第二特征；

基于殘差稠密塊RDB對所述第一特征進(jìn)行處理，獲取第三特征；

對所述第二特征和所述至少一個待融合特征進(jìn)行融合，獲取第四特征；

合并所述第三特征和所述第四特征，生成所述目標(biāo)特征和至少一個待融合特征的融合結(jié)果。

作為本發(fā)明實施例一種可選的實施方式，所述對所述第二特征和所述至少一個待融合特征進(jìn)行融合，獲取第四特征，包括：

按照各待融合特征的空間尺度與所述第二特征的空間尺度的差值對所述至少一個待融合特征進(jìn)行降序排序，獲取排序結(jié)果；

對所述排序結(jié)果中的第一個待融合特征和所述第二特征進(jìn)行融合，生成所述第一個待融合特征的融合結(jié)果；

逐一對所述排序結(jié)果中的其它待融合特征和上一個待融合特征的融合結(jié)果進(jìn)行融合，生成所述排序結(jié)果中的最后一個待融合特征的融合結(jié)果；

將所述排序結(jié)果中的最后一個待融合特征的融合結(jié)果作為所述第四特征。

作為本發(fā)明實施例一種可選的實施方式，所述對所述排序結(jié)果中的第一個待融合特征和所述第二特征進(jìn)行融合，生成所述第一個待融合特征的融合結(jié)果，包括：