[發(fā)明專(zhuān)利]圖像處理方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202011046638.0
• 申請(qǐng)日: 2020-09-29
• 公開(kāi)（公告）號(hào): CN112184584A
• 公開(kāi)（公告）日: 2021-01-05
• 發(fā)明（設(shè)計(jì)）人: 劉曉坤
• 申請(qǐng)（專(zhuān)利權(quán)）人: 北京達(dá)佳互聯(lián)信息技術(shù)有限公司
• 主分類(lèi)號(hào): G06T5/00
• 分類(lèi)號(hào): G06T5/00;G06T11/40;G06N3/04;G06N3/08
• 代理公司: 廣州三環(huán)專(zhuān)利商標(biāo)代理有限公司 44202
• 代理人: 郝傳鑫;賈允

1.一種圖像處理方法，其特征在于，包括：

獲取包含目標(biāo)對(duì)象的待處理圖像；

對(duì)所述待處理圖像進(jìn)行目標(biāo)對(duì)象檢測(cè)，得到目標(biāo)對(duì)象區(qū)域圖像；

對(duì)所述目標(biāo)對(duì)象區(qū)域圖像進(jìn)行瑕疵檢測(cè)，得到目標(biāo)對(duì)象瑕疵掩膜圖像；

將所述目標(biāo)對(duì)象區(qū)域圖像和所述目標(biāo)對(duì)象瑕疵掩膜圖像輸入第一圖像瑕疵填充網(wǎng)絡(luò)，對(duì)所述目標(biāo)對(duì)象區(qū)域圖像的瑕疵區(qū)域進(jìn)行填充處理，得到初始對(duì)象填充圖像；

將所述初始對(duì)象填充圖像和所述目標(biāo)對(duì)象瑕疵掩膜圖像輸入第二圖像瑕疵填充網(wǎng)絡(luò)，對(duì)所述初始對(duì)象填充圖像的瑕疵區(qū)域進(jìn)行填充處理，得到目標(biāo)對(duì)象填充圖像；

基于所述目標(biāo)對(duì)象填充圖像對(duì)所述待處理圖像進(jìn)行修正，得到目標(biāo)對(duì)象圖像。

2.根據(jù)權(quán)利要求1所述的圖像處理方法，其特征在于，所述第一圖像瑕疵填充網(wǎng)絡(luò)包括第一編碼網(wǎng)絡(luò)和第一解碼網(wǎng)絡(luò)，所述將所述目標(biāo)對(duì)象區(qū)域圖像和所述目標(biāo)對(duì)象瑕疵掩膜圖像輸入第一圖像瑕疵填充網(wǎng)絡(luò)，對(duì)所述目標(biāo)對(duì)象區(qū)域圖像的瑕疵區(qū)域進(jìn)行填充處理，得到初始對(duì)象填充圖像包括：

將所述目標(biāo)對(duì)象區(qū)域圖像和所述目標(biāo)對(duì)象瑕疵掩膜圖像輸入所述第一編碼網(wǎng)絡(luò)，利用所述第一編碼網(wǎng)絡(luò)對(duì)所述目標(biāo)對(duì)象區(qū)域圖像和所述目標(biāo)對(duì)象瑕疵掩膜圖像進(jìn)行特征抽象，得到瑕疵填充特征信息；

將所述瑕疵填充特征信息輸入所述第一解碼網(wǎng)絡(luò)，利用所述第一解碼網(wǎng)絡(luò)對(duì)所述瑕疵填充特征信息進(jìn)行對(duì)象重建處理，得到所述初始對(duì)象填充圖像。

3.根據(jù)權(quán)利要求1所述的圖像處理方法，其特征在于，所述第二圖像瑕疵填充網(wǎng)絡(luò)包括第二編碼網(wǎng)絡(luò)和第二解碼網(wǎng)絡(luò)；所述第二編碼網(wǎng)絡(luò)包括第一編碼分支網(wǎng)絡(luò)和第二編碼分支網(wǎng)絡(luò)；

所述將所述初始對(duì)象填充圖像和所述目標(biāo)對(duì)象瑕疵掩膜圖像輸入第二圖像瑕疵填充網(wǎng)絡(luò)，對(duì)所述初始對(duì)象填充圖像的瑕疵區(qū)域進(jìn)行填充處理，得到目標(biāo)對(duì)象填充圖像包括：

將所述初始對(duì)象填充圖像和所述目標(biāo)對(duì)象瑕疵掩膜圖像輸入所述第一編碼分支網(wǎng)絡(luò)，利用所述第一編碼分支網(wǎng)絡(luò)對(duì)所述初始對(duì)象填充圖像和所述目標(biāo)對(duì)象瑕疵掩膜圖像進(jìn)行全局特征抽象，得到全局特征信息；

將所述初始對(duì)象填充圖像和所述目標(biāo)對(duì)象瑕疵掩膜圖像輸入所述第二編碼分支網(wǎng)絡(luò)，利用所述第二編碼分支網(wǎng)絡(luò)對(duì)所述初始對(duì)象填充圖像和所述目標(biāo)對(duì)象瑕疵掩膜圖像進(jìn)行局部特征搜索，得到局部特征信息，所述局部特征信息表征所述初始對(duì)象填充圖像的瑕疵區(qū)域預(yù)設(shè)范圍內(nèi)的圖像紋理和/或顏色信息；

將所述全局特征信息和所述局部特征信息輸入所述第二解碼網(wǎng)絡(luò)，利用所述第二解碼網(wǎng)絡(luò)對(duì)所述全局特征信息和所述局部特征信息進(jìn)行對(duì)象重建處理，得到當(dāng)前初始對(duì)象填充圖像。

4.根據(jù)權(quán)利要求1所述的圖像處理方法，其特征在于，所述基于所述目標(biāo)對(duì)象填充圖像對(duì)所述待處理圖像進(jìn)行修正，得到目標(biāo)對(duì)象圖像包括：

確定所述待處理圖像中的瑕疵區(qū)域位置信息；

獲取所述目標(biāo)對(duì)象填充圖像中與所述瑕疵區(qū)域位置信息對(duì)應(yīng)的圖像塊；

基于所述瑕疵區(qū)域位置信息，將所述待處理圖像中的瑕疵區(qū)域替換為所述對(duì)應(yīng)的圖像塊，得到所述目標(biāo)對(duì)象圖像；

或，

確定所述待處理圖像中的目標(biāo)對(duì)象位置信息；

基于所述目標(biāo)對(duì)象位置信息，將所述待處理圖像中的目標(biāo)對(duì)象區(qū)域圖像替換為所述目標(biāo)對(duì)象填充圖像，得到所述目標(biāo)對(duì)象圖像。

5.根據(jù)權(quán)利要求1所述的圖像處理方法，其特征在于，在基于所述目標(biāo)對(duì)象填充圖像對(duì)所述待處理圖像進(jìn)行修正，得到目標(biāo)對(duì)象圖像之前，所述方法還包括：

將所述目標(biāo)對(duì)象填充圖像和所述目標(biāo)對(duì)象瑕疵掩膜圖像輸入第三圖像瑕疵填充網(wǎng)絡(luò)，對(duì)所述目標(biāo)對(duì)象填充圖像的瑕疵區(qū)域進(jìn)行填充處理，得到當(dāng)前目標(biāo)對(duì)象填充圖像；

所述基于所述目標(biāo)對(duì)象填充圖像對(duì)所述待處理圖像進(jìn)行修正，得到目標(biāo)對(duì)象圖像包括：基于所述當(dāng)前目標(biāo)對(duì)象填充圖像對(duì)所述待處理圖像進(jìn)行修正，得到所述目標(biāo)對(duì)象圖像。