[發(fā)明專利]人臉融合模型獲取及人臉融合方法、裝置及存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202010560733.6
• 申請(qǐng)日: 2020-06-18
• 公開(kāi)（公告）號(hào): CN111860167A
• 公開(kāi)（公告）日: 2020-10-30
• 發(fā)明（設(shè)計(jì)）人: 余席宇;洪智濱
• 申請(qǐng)（專利權(quán)）人: 北京百度網(wǎng)訊科技有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 北京鴻德海業(yè)知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11412
• 代理人: 谷春靜

本申請(qǐng)公開(kāi)了人臉融合模型獲取及人臉融合方法、裝置及存儲(chǔ)介質(zhì)，涉及人工智能、深度學(xué)習(xí)及計(jì)算機(jī)視覺(jué)領(lǐng)域，其中的方法可包括：獲取訓(xùn)練樣本，訓(xùn)練樣本中包括：目標(biāo)人臉圖像以及模板人臉圖像；利用訓(xùn)練樣本，訓(xùn)練得到用于對(duì)輸入的目標(biāo)人臉圖像和模板人臉圖像進(jìn)行人臉融合的人臉融合模型，包括：獲取目標(biāo)人臉圖像中的目標(biāo)人臉的屬性信息；對(duì)目標(biāo)人臉圖像及模板人臉圖像進(jìn)行人臉融合，得到融合人臉；獲取融合人臉的屬性信息；根據(jù)目標(biāo)人臉的屬性信息及融合人臉的屬性信息構(gòu)建屬性一致性損失函數(shù)，利用屬性一致性損失函數(shù)進(jìn)行人臉融合模型的自監(jiān)督學(xué)習(xí)。本申請(qǐng)所述方案可以用于云服務(wù)，可提升人臉融合效果并具有廣泛適用性等。

技術(shù)領(lǐng)域

本申請(qǐng)涉及計(jì)算機(jī)應(yīng)用技術(shù)，特別涉及人工智能、深度學(xué)習(xí)及計(jì)算機(jī)視覺(jué)領(lǐng)域的人臉融合模型獲取及人臉融合方法、裝置及存儲(chǔ)介質(zhì)。

背景技術(shù)

目前，人臉融合技術(shù)已廣泛應(yīng)用于虛擬視覺(jué)形象、長(zhǎng)短視頻趣味玩法、相冊(cè)趣味玩法等各種場(chǎng)景。人臉融合技術(shù)通常需要保留一個(gè)人臉形象的身份信息而融合另一個(gè)人臉形象的屬性信息。

鑒于實(shí)現(xiàn)成本較低，目前多采用基于混合變形(blendshape)的人臉融合方法等進(jìn)行人臉融合，但這種方法的融合效果較差，即得到的融合形象不夠真實(shí)等。

發(fā)明內(nèi)容

本申請(qǐng)?zhí)峁┝巳四樔诤夏Ｐ瞳@取及人臉融合方法、裝置及存儲(chǔ)介質(zhì)。

一種人臉融合模型獲取方法，包括：

獲取訓(xùn)練樣本，所述訓(xùn)練樣本中包括：目標(biāo)人臉圖像以及模板人臉圖像；

利用所述訓(xùn)練樣本，訓(xùn)練得到用于對(duì)輸入的目標(biāo)人臉圖像和模板人臉圖像進(jìn)行人臉融合的人臉融合模型，包括：

獲取所述目標(biāo)人臉圖像中的目標(biāo)人臉的屬性信息；

對(duì)所述目標(biāo)人臉圖像及所述模板人臉圖像進(jìn)行人臉融合，得到融合人臉；

獲取所述融合人臉的屬性信息；

根據(jù)所述目標(biāo)人臉的屬性信息及所述融合人臉的屬性信息構(gòu)建屬性一致性損失函數(shù)，利用所述屬性一致性損失函數(shù)進(jìn)行所述人臉融合模型的自監(jiān)督學(xué)習(xí)。

一種人臉融合方法，包括：

獲取目標(biāo)人臉圖像及模板人臉圖像；

將所述目標(biāo)人臉圖像及所述模板人臉圖像輸入按照上述方法獲取到的人臉融合模型，得到輸出的人臉融合結(jié)果。

一種人臉融合模型獲取裝置，包括：樣本獲取模塊以及模型訓(xùn)練模塊；

所述樣本獲取模塊，用于獲取訓(xùn)練樣本，所述訓(xùn)練樣本中包括：目標(biāo)人臉圖像以及模板人臉圖像；

所述模型訓(xùn)練模塊，用于利用所述訓(xùn)練樣本，訓(xùn)練得到用于對(duì)輸入的目標(biāo)人臉圖像和模板人臉圖像進(jìn)行人臉融合的人臉融合模型，包括：獲取所述目標(biāo)人臉圖像中的目標(biāo)人臉的屬性信息；對(duì)所述目標(biāo)人臉圖像及所述模板人臉圖像進(jìn)行人臉融合，得到融合人臉；獲取所述融合人臉的屬性信息；根據(jù)所述目標(biāo)人臉的屬性信息及所述融合人臉的屬性信息構(gòu)建屬性一致性損失函數(shù)，利用所述屬性一致性損失函數(shù)進(jìn)行所述人臉融合模型的自監(jiān)督學(xué)習(xí)。

一種人臉融合裝置，包括：圖像獲取模塊以及人臉融合模塊；

所述圖像獲取模塊，用于獲取目標(biāo)人臉圖像及模板人臉圖像；

所述人臉融合模塊，用于將所述目標(biāo)人臉圖像及所述模板人臉圖像輸入按照上述方法獲取到的人臉融合模型，得到輸出的人臉融合結(jié)果。

一種電子設(shè)備，包括：

至少一個(gè)處理器；以及

與所述至少一個(gè)處理器通信連接的存儲(chǔ)器；其中，