[發(fā)明專利]合成圖像處理方法、裝置、電子設(shè)備和存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202210217122.0
• 申請(qǐng)日: 2022-03-07
• 公開（公告）號(hào): CN114612357A
• 公開（公告）日: 2022-06-10
• 發(fā)明（設(shè)計(jì)）人: 彭瑾龍;羅澤坤;王濤;王亞彪;汪鋮杰
• 申請(qǐng)（專利權(quán)）人: 騰訊科技（上海）有限公司
• 主分類號(hào): G06T5/50
• 分類號(hào): G06T5/50;G06T7/194;G06T7/90
• 代理公司: 廣州三環(huán)專利商標(biāo)代理有限公司 44202
• 代理人: 賈允

1.一種合成圖像處理方法，其特征在于，所述方法包括：

基于待處理合成圖像的前景區(qū)域特征信息，對(duì)所述待處理合成圖像進(jìn)行顏色變換全局處理，得到初始合成圖像，所述前景區(qū)域特征信息為對(duì)所述待處理合成圖像的前景區(qū)域進(jìn)行特征提取得到的；

對(duì)所述前景區(qū)域進(jìn)行區(qū)域劃分，得到多個(gè)子區(qū)域；

將所述初始合成圖像和所述多個(gè)子區(qū)域各自對(duì)應(yīng)的分塊區(qū)域特征信息輸入到所述分塊前景處理模型中進(jìn)行顏色變換處理，得到目標(biāo)合成圖像，所述目標(biāo)合成圖像中的每個(gè)子區(qū)域?qū)?yīng)不同程度的顏色變換處理結(jié)果。

2.根據(jù)權(quán)利要求1所述的合成圖像處理方法，其特征在于，所述基于所述待處理合成圖像的前景區(qū)域特征信息，對(duì)所述待處理合成圖像進(jìn)行顏色變換全局處理，得到初始合成圖像包括：

將所述待處理合成圖像和所述前景區(qū)域特征信息輸入到全局前景處理模型中進(jìn)行顏色變換全局處理，得到所述初始合成圖像。

3.根據(jù)權(quán)利要求2所述的合成圖像處理方法，其特征在于，所述將所述初始合成圖像和所述多個(gè)子區(qū)域各自對(duì)應(yīng)的分塊區(qū)域特征信息輸入到所述分塊前景處理模型中進(jìn)行顏色變換處理，得到目標(biāo)合成圖像包括：

獲取所述全局前景處理模型中目標(biāo)網(wǎng)絡(luò)結(jié)構(gòu)輸出的全局特征處理結(jié)果，所述全局前景處理模型中的網(wǎng)絡(luò)結(jié)構(gòu)與所述分塊前景處理模型中的網(wǎng)絡(luò)結(jié)構(gòu)對(duì)應(yīng)；

將所述初始合成圖像、所述多個(gè)子區(qū)域各自對(duì)應(yīng)的分塊區(qū)域特征信息和所述全局特征處理結(jié)果輸入到所述分塊前景處理模型中進(jìn)行顏色變換處理，得到所述目標(biāo)合成圖像。

4.根據(jù)權(quán)利要求3所述的合成圖像處理方法，其特征在于，所述分塊前景處理模型包括多個(gè)按序排列的分塊編碼層、每個(gè)分塊編碼層一一對(duì)應(yīng)的分塊解碼層和特征融合層，將與每個(gè)分塊編碼層對(duì)應(yīng)維度的全局前景處理模型中每個(gè)全局編碼層輸出的初始全局特征信息作為所述全局特征處理結(jié)果，所述將所述初始合成圖像、所述多個(gè)子區(qū)域各自對(duì)應(yīng)的分塊區(qū)域特征信息和所述全局特征處理結(jié)果輸入到所述分塊前景處理模型中進(jìn)行顏色變換處理，得到所述目標(biāo)合成圖像包括：

將所述初始合成圖像和所述分塊區(qū)域特征信息輸入到所述多個(gè)按序排列的分塊編碼層中進(jìn)行特征處理，得到每個(gè)分塊編碼層輸出的初始分塊特征信息；

在當(dāng)前分塊解碼層為第一個(gè)分塊解碼層時(shí)，將第一個(gè)初始分塊特征信息和第一初始全局特征信息輸入到所述第一個(gè)分塊解碼層中進(jìn)行特征處理，得到所述第一個(gè)分塊解碼層輸出的目標(biāo)分塊特征信息，所述第一個(gè)初始分塊特征信息為最后一個(gè)分塊編碼層輸出的信息，所述第一初始全局特征信息為與所述最后一個(gè)分塊編碼層同一維度的全局編碼層輸出的信息；

在所述當(dāng)前分塊解碼層為非第一個(gè)分塊解碼層時(shí)，獲取所述當(dāng)前分塊解碼層對(duì)應(yīng)的上一目標(biāo)分塊特征信息；

將所述上一目標(biāo)分塊特征信息、當(dāng)前初始分塊特征信息和第二初始全局特征信息輸入到所述當(dāng)前分塊解碼層中進(jìn)行特征處理，得到所述當(dāng)前分塊解碼層輸出的目標(biāo)分塊特征信息，所述當(dāng)前初始分塊特征信息為所述當(dāng)前分塊解碼層對(duì)應(yīng)的當(dāng)前分塊編碼層輸出的信息，所述第二初始全局特征信息為與所述當(dāng)前分塊編碼層同一維度的全局編碼層輸出的信息；

將所述每個(gè)分塊解碼層輸出的目標(biāo)分塊特征信息輸入到所述特征融合層中進(jìn)行特征融合，得到所述目標(biāo)合成圖像。

5.根據(jù)權(quán)利要求1所述的合成圖像處理方法，其特征在于，所述對(duì)所述前景區(qū)域進(jìn)行區(qū)域劃分，得到多個(gè)子區(qū)域包括：

基于所述前景區(qū)域?qū)?yīng)的圖像特征信息，確定多個(gè)初始分塊中心信息；

將所述多個(gè)初始分塊中心信息作為當(dāng)前分塊中心信息；

基于所述前景區(qū)域和所述當(dāng)前分塊中心信息，確定每個(gè)當(dāng)前分塊中心信息對(duì)應(yīng)的當(dāng)前分塊區(qū)域；

基于所述當(dāng)前分塊區(qū)域，對(duì)所述當(dāng)前分塊區(qū)域?qū)?yīng)的當(dāng)前分塊中心信息進(jìn)行更新；

重復(fù)所述基于所述前景區(qū)域和所述當(dāng)前分塊中心信息，確定每個(gè)當(dāng)前分塊中心信息對(duì)應(yīng)的當(dāng)前分塊區(qū)域到所述基于所述當(dāng)前分塊區(qū)域，對(duì)所述當(dāng)前分塊區(qū)域?qū)?yīng)的當(dāng)前分塊中心信息進(jìn)行更新的步驟，直到更新前后的當(dāng)前分塊中心信息匹配，將所述當(dāng)前分塊中心信息作為目標(biāo)分塊中心信息；

將所述目標(biāo)分塊中心信息對(duì)應(yīng)的當(dāng)前分塊區(qū)域作為子區(qū)域。