[發(fā)明專利]一種圖像處理方法、裝置、設(shè)備及介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202011064705.1
• 申請(qǐng)日: 2020-09-30
• 公開（公告）號(hào): CN113393544A
• 公開（公告）日: 2021-09-14
• 發(fā)明（設(shè)計(jì)）人: 陳健;王超;賁有成;申瑞雪;任國(guó)棟;徐昊;程培;俞剛;傅斌
• 申請(qǐng)（專利權(quán)）人: 騰訊科技（深圳）有限公司
• 主分類號(hào): G06T11/00
• 分類號(hào): G06T11/00;G06T13/80
• 代理公司: 廣州三環(huán)專利商標(biāo)代理有限公司 44202
• 代理人: 熊永強(qiáng);杜維

1.一種圖像處理方法，其特征在于，所述方法包括：

獲取用于模型訓(xùn)練的樣本數(shù)據(jù)，所述樣本數(shù)據(jù)包括標(biāo)注真實(shí)人臉圖像A_i、與所述標(biāo)注真實(shí)人臉圖像A_i相匹配的標(biāo)注卡通人臉圖像B_i，以及非標(biāo)注真實(shí)人臉圖像C_i；

調(diào)用圖像處理模型對(duì)所述標(biāo)注真實(shí)人臉圖像A_i進(jìn)行轉(zhuǎn)換處理，得到所述標(biāo)注真實(shí)人臉圖像A_i對(duì)應(yīng)的重構(gòu)卡通人臉圖像B'_i；調(diào)用所述圖像處理模型對(duì)所述非標(biāo)注真實(shí)人臉圖像C_i進(jìn)行轉(zhuǎn)換處理，得到所述非標(biāo)注真實(shí)人臉圖像C_i對(duì)應(yīng)的重構(gòu)卡通人臉圖像B”_i；并調(diào)用所述圖像處理模型對(duì)所述重構(gòu)卡通人臉圖像B”_i進(jìn)行逆轉(zhuǎn)換處理，得到所述非標(biāo)注真實(shí)人臉圖像C_i對(duì)應(yīng)的重構(gòu)真實(shí)人臉圖像C”_i；以及調(diào)用所述圖像處理模型對(duì)所述標(biāo)注卡通人臉圖像B_i進(jìn)行逆轉(zhuǎn)換處理，得到所述標(biāo)注卡通人臉圖像B_i對(duì)應(yīng)的重構(gòu)真實(shí)人臉圖像C'_i；

根據(jù)所述重構(gòu)卡通人臉圖像B'_i與所述標(biāo)注卡通人臉圖像B_i之間的差異性獲取所述圖像處理模型的第一損失；根據(jù)所述重構(gòu)卡通人臉圖像B'_i、所述重構(gòu)卡通人臉圖像B”_i及所述標(biāo)注卡通人臉圖像B_i，獲取所述圖像處理模型的第二損失；根據(jù)所述非標(biāo)注真實(shí)人臉圖像C_i與所述重構(gòu)真實(shí)人臉圖像C'_i，獲取所述圖像處理模型的第三損失；以及根據(jù)所述非標(biāo)注真實(shí)人臉圖像C_i與所述重構(gòu)真實(shí)人臉圖像C”_i之間的差異性，獲取所述圖像處理模型的第四損失；

基于所述第一損失、所述第二損失、所述第三損失和所述第四損失，更新所述圖像處理模型的參數(shù)以訓(xùn)練所述圖像處理模型。

2.如權(quán)利要求1所述的方法，其特征在于，所述獲取用于模型訓(xùn)練的樣本數(shù)據(jù)，包括：

獲取訓(xùn)練數(shù)據(jù)集，并從所述訓(xùn)練數(shù)據(jù)集中采樣出用于模型訓(xùn)練的所述樣本數(shù)據(jù)；

其中，所述訓(xùn)練數(shù)據(jù)集包括標(biāo)注真實(shí)人臉圖像集A、標(biāo)注卡通人臉圖像集B及非標(biāo)注真實(shí)人臉圖像集C；所述標(biāo)注真實(shí)人臉圖像集A中包括屬于真人域空間的N個(gè)標(biāo)注真實(shí)人臉圖像；所述標(biāo)注卡通人臉圖像集B中包括屬于卡通域空間的N個(gè)標(biāo)注卡通人臉圖像；所述N個(gè)標(biāo)注真實(shí)人臉圖像與所述N個(gè)標(biāo)注卡通人臉圖像一一配對(duì)；所述非標(biāo)注真實(shí)人臉圖像集C中包括屬于所述真人域空間的M個(gè)非標(biāo)注真實(shí)人臉圖像，M、N均為正整數(shù)，且NM；

所述標(biāo)注真實(shí)人臉圖像A_i是所述標(biāo)注真實(shí)人臉圖像集A中的任一個(gè)或多個(gè)圖像；所述標(biāo)注卡通人臉圖像B_i是所述標(biāo)注卡通人臉圖像集B中的一個(gè)或多個(gè)圖像；所述非標(biāo)注真實(shí)人臉圖像C_i是所述非標(biāo)注真實(shí)人臉圖像集C中的任一個(gè)或多個(gè)圖像，i為正整數(shù)且i≤N。

3.如權(quán)利要求1或2所述的方法，其特征在于，所述圖像處理模型包括第一生成器；

所述調(diào)用圖像處理模型對(duì)所述標(biāo)注真實(shí)人臉圖像A_i進(jìn)行轉(zhuǎn)換處理，得到所述標(biāo)注真實(shí)人臉圖像A_i對(duì)應(yīng)的重構(gòu)卡通人臉圖像B'_i，包括：調(diào)用所述第一生成器對(duì)所述標(biāo)注真實(shí)人臉圖像A_i進(jìn)行轉(zhuǎn)換處理，得到所述重構(gòu)卡通人臉圖像B'_i；

所述調(diào)用所述圖像處理模型對(duì)所述非標(biāo)注真實(shí)人臉圖像C_i進(jìn)行轉(zhuǎn)換處理，得到所述非標(biāo)注真實(shí)人臉圖像C_i對(duì)應(yīng)的重構(gòu)卡通人臉圖像B”_i，包括：調(diào)用所述第一生成器對(duì)所述非標(biāo)注真實(shí)人臉圖像C_i進(jìn)行轉(zhuǎn)換處理，得到所述重構(gòu)卡通人臉圖像B”_i；

其中，所述轉(zhuǎn)換處理是指將所述真人域空間的圖像轉(zhuǎn)換至所述卡通域空間的處理。