[發(fā)明專利]一種圖像生成方法、裝置、存儲(chǔ)介質(zhì)及電子設(shè)備

有效

• 申請(qǐng)?zhí)枺?/td>: 201910174443.5
• 申請(qǐng)日: 2019-03-08
• 公開(kāi)（公告）號(hào): CN109886248B
• 公開(kāi)（公告）日: 2023-06-23
• 發(fā)明（設(shè)計(jì)）人: 程然;張玉立
• 申請(qǐng)（專利權(quán)）人: 南方科技大學(xué)
• 主分類號(hào): G06V40/16
• 分類號(hào): G06V40/16;G06V10/82;G06N3/0464;G06N3/094
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

1.一種圖像生成方法，其特征在于，包括：

獲取待預(yù)測(cè)用戶的當(dāng)前臉部圖像和第一預(yù)測(cè)等級(jí)；

根據(jù)所述待預(yù)測(cè)用戶的當(dāng)前臉部圖像以及所述第一預(yù)測(cè)等級(jí)，利用對(duì)抗網(wǎng)絡(luò)模型的生成器確定所述第一預(yù)測(cè)等級(jí)所對(duì)應(yīng)的第一臉部預(yù)測(cè)圖像；

利用對(duì)抗網(wǎng)絡(luò)模型的生成器確定所述第一預(yù)測(cè)等級(jí)所對(duì)應(yīng)的第一臉部預(yù)測(cè)圖像之前，還包括：

通過(guò)如下方式訓(xùn)練所述對(duì)抗網(wǎng)絡(luò)模型：

將樣本臉部圖像和設(shè)定預(yù)測(cè)等級(jí)輸入至所述對(duì)抗網(wǎng)絡(luò)模型的生成器，并將所述生成器生成的與所述設(shè)定預(yù)測(cè)等級(jí)對(duì)應(yīng)的第一合成臉部圖像和所述樣本臉部圖像輸入至所述對(duì)抗網(wǎng)絡(luò)模型的判別器；

通過(guò)所述判別器輸出所述第一合成臉部圖像的等級(jí)和真實(shí)度，以對(duì)所述對(duì)抗網(wǎng)絡(luò)模型的生成器和判別器進(jìn)行訓(xùn)練；

對(duì)所述對(duì)抗網(wǎng)絡(luò)模型的生成器和判別器進(jìn)行訓(xùn)練包括：

根據(jù)所述第一合成臉部圖像的等級(jí)和真實(shí)度，更新所述生成器的參數(shù)，以使所述生成器生成可以使所述判別器打高分的第二合成臉部圖像，并使所述生成器生成的第二合成臉部圖像對(duì)應(yīng)的等級(jí)與所述設(shè)定預(yù)測(cè)等級(jí)相同；

根據(jù)所述第一合成臉部圖像和樣本臉部圖像，更新所述判別器的參數(shù)，以使所述判別器對(duì)所述第一合成臉部圖像打低分，對(duì)所述樣本臉部圖像打高分，并判斷所述第一合成臉部圖像的等級(jí)；

在對(duì)所述對(duì)抗網(wǎng)絡(luò)模型的生成器和判別器進(jìn)行訓(xùn)練時(shí)，訓(xùn)練數(shù)據(jù)只需要各個(gè)等級(jí)的用戶的臉部圖像；

所述第一預(yù)測(cè)等級(jí)是預(yù)測(cè)的所述待預(yù)測(cè)用戶的發(fā)病等級(jí)。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，獲取待預(yù)測(cè)用戶的當(dāng)前臉部圖像包括：

利用圖像生成裝置的第一人臉取景框?qū)λ龃A(yù)測(cè)用戶的臉部圖像進(jìn)行采集、定位和裁剪，以得到所述待預(yù)測(cè)用戶的當(dāng)前臉部圖像。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，還包括：

對(duì)所述圖像生成裝置的原始人臉取景框進(jìn)行放大，以得到所述第一人臉取景框。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述生成器采用殘差網(wǎng)絡(luò)建立；所述判別器采用卷積神經(jīng)網(wǎng)絡(luò)建立。

5.一種圖像生成裝置，其特征在于，包括：

信息獲取模塊，用于獲取待預(yù)測(cè)用戶的當(dāng)前臉部圖像和第一預(yù)測(cè)等級(jí)；

圖像預(yù)測(cè)模塊，用于根據(jù)所述待預(yù)測(cè)用戶的當(dāng)前臉部圖像以及所述第一預(yù)測(cè)等級(jí)，利用對(duì)抗網(wǎng)絡(luò)模型的生成器確定所述第一預(yù)測(cè)等級(jí)所對(duì)應(yīng)的第一臉部預(yù)測(cè)圖像；

所述裝置還包括：模型訓(xùn)練模塊，用于訓(xùn)練所述對(duì)抗網(wǎng)絡(luò)模型；

所述模型訓(xùn)練模塊包括：

生成子模塊，用于將樣本臉部圖像和設(shè)定預(yù)測(cè)等級(jí)輸入至所述對(duì)抗網(wǎng)絡(luò)模型的生成器，并將所述生成器生成的與所述設(shè)定預(yù)測(cè)等級(jí)對(duì)應(yīng)的第一合成臉部圖像和所述樣本臉部圖像輸入至所述對(duì)抗網(wǎng)絡(luò)模型的判別器；

判別子模塊，用于通過(guò)所述判別器輸出所述第一合成臉部圖像的等級(jí)和真實(shí)度，以對(duì)所述對(duì)抗網(wǎng)絡(luò)模型的生成器和判別器進(jìn)行訓(xùn)練；

所述生成子模塊，具體用于根據(jù)所述第一合成臉部圖像的等級(jí)和真實(shí)度，更新所述生成器的參數(shù)，以使所述生成器生成可以使所述判別器打高分的第二合成臉部圖像，并使所述生成器生成的第二合成臉部圖像對(duì)應(yīng)的等級(jí)與所述設(shè)定預(yù)測(cè)等級(jí)相同；

所述判別子模塊，具體用于根據(jù)所述第一合成臉部圖像和樣本臉部圖像，更新所述判別器的參數(shù)，以使所述判別器對(duì)所述第一合成臉部圖像打低分，對(duì)所述樣本臉部圖像打高分，并判斷所述第一合成臉部圖像的等級(jí)；

在對(duì)所述對(duì)抗網(wǎng)絡(luò)模型進(jìn)行訓(xùn)練時(shí)，訓(xùn)練數(shù)據(jù)只需要各個(gè)等級(jí)的用戶的臉部圖像；

所述第一預(yù)測(cè)等級(jí)是預(yù)測(cè)的所述待預(yù)測(cè)用戶的發(fā)病等級(jí)。

6.根據(jù)權(quán)利要求5所述的裝置，其特征在于，所述信息獲取模塊，包括：

圖像處理子模塊，用于利用圖像生成裝置的第一人臉取景框?qū)λ龃A(yù)測(cè)用戶的臉部圖像進(jìn)行采集、定位和裁剪，以得到所述待預(yù)測(cè)用戶的當(dāng)前臉部圖像。

7.根據(jù)權(quán)利要求6所述的裝置，其特征在于，所述信息獲取模塊，還包括：

取景框放大子模塊，用于對(duì)所述圖像生成裝置的原始人臉取景框進(jìn)行放大，以得到所述第一人臉取景框。