[發(fā)明專利]人臉點(diǎn)云模型生成方法及裝置、存儲(chǔ)介質(zhì)、電子設(shè)備

在審

• 申請(qǐng)?zhí)枺?/td>: 202010734492.2
• 申請(qǐng)日: 2020-07-27
• 公開（公告）號(hào): CN112749611A
• 公開（公告）日: 2021-05-04
• 發(fā)明（設(shè)計(jì)）人: 林祥凱;王盛;暴林超
• 申請(qǐng)（專利權(quán)）人: 騰訊科技（深圳）有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;G06K9/62;G06T17/20
• 代理公司: 深圳市隆天聯(lián)鼎知識(shí)產(chǎn)權(quán)代理有限公司 44232
• 代理人: 葉虹

本公開提供一種人臉點(diǎn)云模型生成方法及裝置、電子設(shè)備、存儲(chǔ)介質(zhì)；涉及人臉識(shí)別技術(shù)領(lǐng)域。所述人臉點(diǎn)云模型生成方法包括：獲取目標(biāo)對(duì)象對(duì)應(yīng)的臉部特征圖像；其中，所述臉部特征圖像包括人臉特征圖像和所述人臉特征圖像對(duì)應(yīng)的深度圖像；對(duì)所述人臉特征圖像進(jìn)行關(guān)鍵幀篩選處理，確定所述人臉特征圖像中的關(guān)鍵姿態(tài)圖像；通過所述關(guān)鍵姿態(tài)圖像對(duì)所述關(guān)鍵姿態(tài)圖像對(duì)應(yīng)的所述深度圖像進(jìn)行裁剪處理，生成目標(biāo)深度圖像；根據(jù)所述關(guān)鍵姿態(tài)圖像以及所述目標(biāo)深度圖像進(jìn)行點(diǎn)云融合，生成所述目標(biāo)對(duì)象對(duì)應(yīng)的人臉點(diǎn)云模型。本公開能夠全程自動(dòng)生成人臉點(diǎn)云模型，不僅提高了人臉點(diǎn)云模型的效率，同時(shí)有效保證人臉點(diǎn)云模型的質(zhì)量。

技術(shù)領(lǐng)域

本公開涉及人臉識(shí)別技術(shù)領(lǐng)域，具體而言，涉及一種人臉點(diǎn)云模型生成方法、人臉點(diǎn)云模型生成裝置、電子設(shè)備以及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)。

背景技術(shù)

隨著科學(xué)技術(shù)的飛速發(fā)展，人臉識(shí)別技術(shù)越來越得到人們的廣泛關(guān)注。其中，三維人臉識(shí)別技術(shù)逐漸被應(yīng)用到不同的實(shí)際場(chǎng)景中。

目前，相關(guān)技術(shù)方案中，在生成人臉點(diǎn)云模型時(shí)需要通過人工的方式過濾人臉圖像幀，這種方式不僅效率較低，而且魯棒性較差，如在選取的人臉圖像幀中存在較多干擾圖像時(shí)，會(huì)導(dǎo)致生成的人臉點(diǎn)云模型出現(xiàn)融合錯(cuò)誤或點(diǎn)云重合等問題，甚至出現(xiàn)融合崩潰的現(xiàn)象。

需要說明的是，在上述背景技術(shù)部分公開的信息僅用于加強(qiáng)對(duì)本公開的背景的理解，因此可以包括不構(gòu)成對(duì)本領(lǐng)域普通技術(shù)人員已知的現(xiàn)有技術(shù)的信息。

發(fā)明內(nèi)容

本公開的目的在于提供一種人臉點(diǎn)云模型生成方法、人臉點(diǎn)云模型生成裝置、電子設(shè)備以及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，進(jìn)而在一定程度上克服由于相關(guān)技術(shù)的限制和缺陷而導(dǎo)致的，在生成人臉點(diǎn)云模型時(shí)，生成效率較低且人臉點(diǎn)云模型效果較差的問題。

根據(jù)本公開的第一方面，提供一種人臉點(diǎn)云模型生成方法，包括：

獲取目標(biāo)對(duì)象對(duì)應(yīng)的臉部特征圖像；其中，所述臉部特征圖像包括人臉特征圖像和所述人臉特征圖像對(duì)應(yīng)的深度圖像；

對(duì)所述人臉特征圖像進(jìn)行關(guān)鍵幀篩選處理，確定所述人臉特征圖像中的關(guān)鍵姿態(tài)圖像；

通過所述關(guān)鍵姿態(tài)圖像對(duì)所述關(guān)鍵姿態(tài)圖像對(duì)應(yīng)的所述深度圖像進(jìn)行裁剪處理，生成目標(biāo)深度圖像；

根據(jù)所述關(guān)鍵姿態(tài)圖像以及所述目標(biāo)深度圖像進(jìn)行點(diǎn)云融合，生成所述目標(biāo)對(duì)象對(duì)應(yīng)的人臉點(diǎn)云模型。

在本公開的一種示例性實(shí)施例中，基于前述方案，獲取目標(biāo)對(duì)象對(duì)應(yīng)的臉部特征圖像，包括：

通過固定采集角度的方式，獲取轉(zhuǎn)動(dòng)臉部區(qū)域的所述目標(biāo)對(duì)象對(duì)應(yīng)的臉部特征圖像；或者

通過轉(zhuǎn)動(dòng)采集角度的方式，獲取固定臉部區(qū)域的所述目標(biāo)對(duì)象對(duì)應(yīng)的臉部特征圖像。

在本公開的一種示例性實(shí)施例中，基于前述方案，在獲取目標(biāo)對(duì)象對(duì)應(yīng)的臉部特征圖像之后，所述方法還包括：

對(duì)所述臉部特征圖像進(jìn)行預(yù)處理；

所述對(duì)所述臉部特征圖像進(jìn)行預(yù)處理，包括：

對(duì)所述深度圖像進(jìn)行保邊濾波處理，以去除所述深度圖像中的噪聲信息；以及

對(duì)所述人臉特征圖像進(jìn)行非關(guān)鍵幀過濾處理，以過濾所述人臉特征圖像中的眨眼圖像。

在本公開的一種示例性實(shí)施例中，基于前述方案，對(duì)所述人臉特征圖像進(jìn)行非關(guān)鍵幀過濾處理，包括：

對(duì)所述人臉特征圖像進(jìn)行人臉標(biāo)志點(diǎn)檢測(cè)，確定所述人臉特征圖像對(duì)應(yīng)的二維標(biāo)志點(diǎn)坐標(biāo)；其中，所述二維標(biāo)志點(diǎn)坐標(biāo)包括眼部標(biāo)志點(diǎn)坐標(biāo)；

根據(jù)所述眼部標(biāo)志點(diǎn)坐標(biāo)確定眼睛睜開程度值；