[發(fā)明專利]基于紋理圖像的紋理增強(qiáng)方法、裝置、設(shè)備和存儲介質(zhì)

有效

• 申請?zhí)枺?/td>: 202010224186.4
• 申請日: 2020-03-26
• 公開（公告）號: CN111445410B
• 公開（公告）日: 2022-09-27
• 發(fā)明（設(shè)計）人: 陳雅靜;沈雅欣;者雪飛
• 申請（專利權(quán)）人: 騰訊科技（深圳）有限公司
• 主分類號: G06T5/00
• 分類號: G06T5/00;G06T15/04
• 代理公司: 華進(jìn)聯(lián)合專利商標(biāo)代理有限公司 44224
• 代理人: 李文淵;楊歡

1.一種基于紋理圖像的紋理增強(qiáng)方法，所述方法包括：

獲取待處理的源紋理圖像，并確定所述源紋理圖像所包括的面部區(qū)域和背景區(qū)域；

基于與所述源紋理圖像對應(yīng)的樣本紋理圖像的主成分，對所述面部區(qū)域進(jìn)行擬合處理得到對應(yīng)的面部擬合紋理圖像；其中，所述樣本紋理圖像的主成分通過對所述樣本紋理圖像進(jìn)行主成分分析所得到；

將所述面部擬合紋理圖像與所述背景區(qū)域?qū)?yīng)的背景紋理圖像進(jìn)行融合，得到與所述源紋理圖像對應(yīng)的擬合紋理圖像；

對所述擬合紋理圖像進(jìn)行平滑處理，得到對應(yīng)的平滑紋理圖像；所述平滑處理用于對所述擬合紋理圖像進(jìn)行噪聲抑制；

通過生成對抗網(wǎng)絡(luò)中的生成器對所述平滑紋理圖像進(jìn)行紋理增強(qiáng)處理，輸出與所述源紋理圖像對應(yīng)的目標(biāo)紋理圖像。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述獲取待處理的源紋理圖像，包括：

獲取對目標(biāo)對象的面部進(jìn)行不同角度掃描所得到的、多于一張的面部圖像；

獲取與目標(biāo)場景對應(yīng)的紋理設(shè)置信息；

按照所述紋理設(shè)置信息，對所述多于一張的面部圖像進(jìn)行融合處理，得到與所述目標(biāo)對象對應(yīng)的源紋理圖像。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述按照所述紋理設(shè)置信息，對所述多于一張的面部圖像進(jìn)行融合處理，得到與所述目標(biāo)對象對應(yīng)的源紋理圖像，包括：

通過對所述多于一張的面部圖像進(jìn)行分析，確定與所述目標(biāo)對象對應(yīng)的面部形態(tài)信息和光照信息；

根據(jù)所述面部形態(tài)信息，確定將三維紋理模型中的各位置點分別映射至所述面部圖像中時所對應(yīng)的像素點；

按照所述紋理設(shè)置信息，并基于所確定的像素點的色彩信息和對應(yīng)的光照信息，結(jié)合所述三維紋理模型構(gòu)建與所述目標(biāo)對象對應(yīng)的源紋理圖像。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述樣本紋理圖像包括多于一組的部件樣本紋理圖像；所述基于與所述源紋理圖像對應(yīng)的樣本紋理圖像的主成分，對所述面部區(qū)域進(jìn)行擬合處理得到對應(yīng)的面部擬合紋理圖像，包括：

確定所述面部區(qū)域中包括的多于一個的部件區(qū)域；

基于各所述部件區(qū)域分別對應(yīng)的部件樣本紋理圖像的部件主成分，確定相應(yīng)部件區(qū)域?qū)?yīng)的局部擬合紋理圖像；

按照各部件區(qū)域所對應(yīng)的局部掩模，對相應(yīng)的局部擬合紋理圖像進(jìn)行融合，得到與所述面部區(qū)域?qū)?yīng)的面部擬合紋理圖像。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述基于各所述部件區(qū)域分別對應(yīng)的部件樣本紋理圖像的部件主成分，確定相應(yīng)部件區(qū)域?qū)?yīng)的局部擬合紋理圖像，包括：

獲取對各部件區(qū)域相應(yīng)的部件樣本紋理圖像進(jìn)行主成分分析后所得到的部件主成分、以及各組部件樣本紋理圖像分別對應(yīng)的部件樣本均值；

通過與各部件區(qū)域?qū)?yīng)的部件主成分、待調(diào)整的局部擬合參數(shù)和所述部件樣本均值，構(gòu)建相應(yīng)的局部擬合紋理圖像函數(shù)；

根據(jù)各局部擬合紋理圖像函數(shù)和所述源紋理圖像構(gòu)建第一目標(biāo)損失函數(shù)；

通過不斷調(diào)整所述局部擬合參數(shù)的值，以使得所述第一目標(biāo)損失函數(shù)最小化，當(dāng)滿足停止條件時停止，得到各部件區(qū)域分別對應(yīng)的局部擬合目標(biāo)值；

將與各部件區(qū)域分別對應(yīng)的局部擬合目標(biāo)值分別代入至相應(yīng)的局部擬合紋理圖像函數(shù)，得到與各部件區(qū)域?qū)?yīng)的局部擬合紋理圖像。

6.根據(jù)權(quán)利要求5所述的方法，其特征在于，所述根據(jù)各局部擬合紋理圖像函數(shù)和所述源紋理圖像構(gòu)建第一目標(biāo)損失函數(shù)，包括：

根據(jù)各所述局部擬合紋理圖像函數(shù)之和與所述源紋理圖像的差異，構(gòu)建圖像損失函數(shù)；

根據(jù)各所述局部擬合紋理圖像函數(shù)確定擬合紋理圖像函數(shù)，并基于由所述擬合紋理圖像函數(shù)所確定的當(dāng)前的擬合紋理圖像中各像素的差異，構(gòu)建對應(yīng)的平滑損失函數(shù)；

將所述圖像損失函數(shù)和所述平滑損失函數(shù)的加權(quán)和函數(shù)，作為第一目標(biāo)損失函數(shù)。