[發(fā)明專利]一種3D人臉重建方法、裝置及服務(wù)器

有效

• 申請?zhí)枺?/td>: 201510268521.X
• 申請日: 2015-05-22
• 公開（公告）號: CN104966316B
• 公開（公告）日: 2019-03-15
• 發(fā)明（設(shè)計）人: 汪鋮杰;李季檁;黃飛躍;張磊
• 申請（專利權(quán)）人: 騰訊科技（深圳）有限公司
• 主分類號: G06T17/00
• 分類號: G06T17/00
• 代理公司: 深圳市深佳知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 44285
• 代理人: 王仲凱

本申請公開了一種3D人臉重建方法、裝置及服務(wù)器，其中方法包括：對于獲取的2D人臉圖像，確定其上的特征點(diǎn)；依據(jù)特征點(diǎn)確定人臉的姿態(tài)參數(shù)，并按照姿態(tài)參數(shù)調(diào)整通用三維人臉模型的姿態(tài)；確定特征點(diǎn)在通用三維人臉模型上的對應(yīng)點(diǎn)，并對處于遮擋狀態(tài)下的對應(yīng)點(diǎn)進(jìn)行調(diào)整，以得到初步3D人臉模型；對初步3D人臉模型進(jìn)行變形調(diào)整，并對變形后的3D人臉模型進(jìn)行紋理映射，得到最終的3D人臉。本申請獲取的2D人臉圖像可以是人的側(cè)臉圖像，依據(jù)特征點(diǎn)確定出該側(cè)臉圖像的姿態(tài)參數(shù)，進(jìn)而對通用三維人臉模型進(jìn)行姿態(tài)調(diào)整，使得通用三維人臉模型的姿態(tài)與人臉姿態(tài)一致，進(jìn)而通過后續(xù)處理得到3D人臉。

技術(shù)領(lǐng)域

本申請涉及計算機(jī)技術(shù)領(lǐng)域，更具體地說，涉及一種3D人臉重建方法、裝置及服務(wù)器。

背景技術(shù)

近年來，隨著人臉識別技術(shù)、人臉視頻會議、人臉3D動畫、虛擬技術(shù)的發(fā)展，三維人臉建模受到了越來越多的研究者們的關(guān)注，其中3D人臉形狀重建是三維人臉建模的關(guān)鍵技術(shù)之一。

目前3D人臉重建的方法大多是從多個角度采集多張人臉照片，或者采集一張人臉正面照片，得到3D人臉，進(jìn)而依據(jù)該3D人臉照片進(jìn)行3D人臉的重建。但是，現(xiàn)實(shí)場景中，很多情況下我們是無法采集到人臉正面圖像的，比如在進(jìn)行人臉識別時，很有可能僅采集到人的側(cè)臉，此時現(xiàn)有的3D人臉重建方法將無法構(gòu)建出3D人臉，或者構(gòu)建的3D人臉效果極差。

發(fā)明內(nèi)容

有鑒于此，本申請?zhí)峁┝艘环N3D人臉重建方法、裝置及服務(wù)器，以便針對僅包含人側(cè)臉的照片仍能夠構(gòu)建3D人臉。

為了實(shí)現(xiàn)上述目的，現(xiàn)提出的方案如下：

一種3D人臉重建方法，其特征在于，包括：

獲取用于進(jìn)行3D人臉重建的2D人臉圖像，并確定所述2D人臉圖像上的特征點(diǎn)，所述特征點(diǎn)用于表征人臉輪廓；

利用所述特征點(diǎn)確定人臉的姿態(tài)參數(shù)，并按照所述姿態(tài)參數(shù)調(diào)整預(yù)先獲取的通用三維人臉模型的姿態(tài)；

確定所述特征點(diǎn)在所述通用三維人臉模型上的對應(yīng)點(diǎn)，并對處于遮擋狀態(tài)下的對應(yīng)點(diǎn)進(jìn)行調(diào)整，得到初步3D人臉模型；

對所述初步3D人臉模型進(jìn)行變形調(diào)整，以使所述初步3D人臉模型上對應(yīng)點(diǎn)間關(guān)系與所述2D人臉圖像上特征點(diǎn)間的位置關(guān)系一致，得到變形后3D人臉模型；

對所述變形后3D人臉模型進(jìn)行紋理映射，得到3D人臉。

一種3D人臉重建裝置，其特征在于，包括：

圖像特征點(diǎn)確定單元，用于獲取用于進(jìn)行3D人臉重建的2D人臉圖像，并確定所述2D人臉圖像上的特征點(diǎn)，所述特征點(diǎn)用于表征人臉輪廓；

姿態(tài)調(diào)整單元，用于利用所述特征點(diǎn)確定人臉的姿態(tài)參數(shù)，并按照所述姿態(tài)參數(shù)調(diào)整預(yù)先獲取的通用三維人臉模型的姿態(tài)；

特征點(diǎn)匹配單元，用于確定所述特征點(diǎn)在所述通用三維人臉模型上的對應(yīng)點(diǎn)，并對處于遮擋狀態(tài)下的對應(yīng)點(diǎn)進(jìn)行調(diào)整，得到初步3D人臉模型；

模型變形單元，用于對所述初步3D人臉模型進(jìn)行變形調(diào)整，以使所述初步3D人臉模型上對應(yīng)點(diǎn)間位置關(guān)系與所述2D人臉圖像上特征點(diǎn)間的位置關(guān)系一致，得到變形后3D人臉模型；

紋理映射單元，用于對所述變形后3D人臉模型進(jìn)行紋理映射，得到3D人臉。

一種服務(wù)器，其特征在于，包括權(quán)利要求6-9任一項所述的3D人臉重建裝置。