[發(fā)明專利]一種融合噪聲感知的深度偽造圖像檢測(cè)方法及系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 202210486246.9
• 申請(qǐng)日: 2022-05-06
• 公開(kāi)（公告）號(hào): CN114677372A
• 公開(kāi)（公告）日: 2022-06-28
• 發(fā)明（設(shè)計(jì)）人: 丁昕苗;劉延武;郭文;李國(guó)軍;龐帥
• 申請(qǐng)（專利權(quán)）人: 山東工商學(xué)院
• 主分類號(hào): G06T7/00
• 分類號(hào): G06T7/00;G06T5/10;G06K9/62;G06N3/04;G06N3/08;G06V10/80;G06V10/82
• 代理公司: 濟(jì)南圣達(dá)知識(shí)產(chǎn)權(quán)代理有限公司 37221
• 代理人: 董雪

1.一種融合噪聲感知的深度偽造圖像檢測(cè)方法，其特征在于，包括：

獲取待檢測(cè)圖像；

根據(jù)所獲取的待檢測(cè)圖像和雙重注意力計(jì)算，提取RGB流的特征，得到圖像多尺度增強(qiáng)特征；

對(duì)所獲取的待檢測(cè)圖像進(jìn)行噪聲域特征的提取，根據(jù)所得到的圖像多尺度增強(qiáng)特征和所提取到的噪聲域特征，得到圖像噪聲流特征；

將所得到的圖像的噪聲流特征和所提取到的RGB流的特征進(jìn)行雙流特征融合，得到圖像雙流融合增強(qiáng)特征；

根據(jù)所得到的圖像雙流融合增強(qiáng)特征和局部一致性計(jì)算，完成圖像的偽造檢測(cè)。

2.如權(quán)利要求1中所述的一種融合噪聲感知的深度偽造圖像檢測(cè)方法，其特征在于，在提取RGB流的特征的過(guò)程中，采用漸進(jìn)式空間注意力模塊，通過(guò)雙重注意力計(jì)算自適應(yīng)地學(xué)習(xí)圖像空間域特征的增強(qiáng)權(quán)重和抑制權(quán)重，將原特征圖分別與所述增強(qiáng)權(quán)重和抑制權(quán)重進(jìn)行加權(quán)融合得到增強(qiáng)特征圖和抑制特征圖；所述增強(qiáng)特征圖用于雙流特征融合，所述抑制特征圖在卷積后被再次輸入到下一個(gè)階段的雙重注意力計(jì)算，用于挖掘注意力以外的圖像區(qū)域的潛在特征。

3.如權(quán)利要求1中所述的一種融合噪聲感知的深度偽造圖像檢測(cè)方法，其特征在于，通過(guò)自適應(yīng)卷積核得到高頻噪聲信息，所得到的高頻噪聲信息與相位譜共同作為噪聲流的輸入實(shí)現(xiàn)噪聲域特征的提取，與RGB流所得到的空間域的多尺度增強(qiáng)特征進(jìn)行互補(bǔ)融合得到圖像雙流融合增強(qiáng)特征。

4.如權(quán)利要求1中所述的一種融合噪聲感知的深度偽造圖像檢測(cè)方法，其特征在于，取的待檢測(cè)圖像進(jìn)行預(yù)處理得到灰度圖，基于離散傅里葉變換將所得到的灰度圖轉(zhuǎn)換到頻域灰度圖，將所得到的頻域灰度圖的相位作為輸入圖像的相位譜信息，結(jié)合離散傅里葉逆變換得到所述相位譜重構(gòu)圖。

5.如權(quán)利要求1中所述的一種融合噪聲感知的深度偽造圖像檢測(cè)方法，其特征在于，對(duì)所獲取的待檢測(cè)圖像進(jìn)行預(yù)處理得到灰度圖，采用自適應(yīng)SRM濾波器，引入約束卷積層，將所得到的灰度圖作為約束卷積層的輸入，得到圖像的SRM噪聲信息圖。

6.如權(quán)利要求1中所述的一種融合噪聲感知的深度偽造圖像檢測(cè)方法，其特征在于，對(duì)所述雙流融合增強(qiáng)特征進(jìn)行互補(bǔ)融合，得到多尺度增強(qiáng)特征，將所述多尺度增強(qiáng)特征輸入到卷積塊中得到含高層語(yǔ)義信息的全局特征，同時(shí)將所述多尺度增強(qiáng)特征均分成多個(gè)局部分塊、通過(guò)計(jì)算各個(gè)局部分塊之間的相似度得到局部一致性信息，將所得到的全局特征和局部一致性信息聯(lián)合，完成偽造檢測(cè)。

7.如權(quán)利要求6中所述的一種融合噪聲感知的深度偽造圖像檢測(cè)方法，其特征在于，采用雙線性插值算法將多尺度增強(qiáng)特征圖變?yōu)橥怀叨?，沿著通道維度拼接成特征圖，得到局部一致性信息。

8.一種融合噪聲感知的深度偽造圖像檢測(cè)系統(tǒng)，其特征在于，包括：

獲取模塊，其被配置為獲取待檢測(cè)圖像；

漸進(jìn)式空間注意力模塊，其被配置為根據(jù)所獲取的待檢測(cè)圖像和雙重注意力計(jì)算，提取RGB流的特征，得到圖像多尺度增強(qiáng)特征；

噪聲感知模塊，其被配置為對(duì)所獲取的待檢測(cè)圖像進(jìn)行噪聲域特征的提取，根據(jù)所得到的圖像多尺度增強(qiáng)特征和所提取到的噪聲域特征，得到圖像噪聲流特征；將所得到的圖像的噪聲流特征和所提取到的RGB流的特征進(jìn)行雙流特征融合，得到圖像雙流融合增強(qiáng)特征；

檢測(cè)模塊，其被配置為根據(jù)所得到的圖像雙流融合增強(qiáng)特征和局部一致性計(jì)算，完成圖像的偽造檢測(cè)。

9.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有程序，其特征在于，該程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1-7中任一項(xiàng)所述的融合噪聲感知的深度偽造圖像檢測(cè)方法中的步驟。

10.一種電子設(shè)備，包括存儲(chǔ)器、處理器及存儲(chǔ)在存儲(chǔ)器上并可在處理器上運(yùn)行的程序，其特征在于，所述處理器執(zhí)行所述程序時(shí)實(shí)現(xiàn)如權(quán)利要求1-7中任一項(xiàng)所述的融合噪聲感知的深度偽造圖像檢測(cè)方法中的步驟。