[發(fā)明專(zhuān)利]一種2D虛擬模型的驅(qū)動(dòng)方法及設(shè)備

在審

• 申請(qǐng)?zhí)枺?/td>: 201610065715.4
• 申請(qǐng)日: 2016-01-29
• 公開(kāi)（公告）號(hào): CN107025679A
• 公開(kāi)（公告）日: 2017-08-08
• 發(fā)明（設(shè)計(jì)）人: 周世威;潘亦
• 申請(qǐng)（專(zhuān)利權(quán)）人: 掌贏信息科技（上海）有限公司
• 主分類(lèi)號(hào): G06T13/40
• 分類(lèi)號(hào): G06T13/40;G06T13/80
• 代理公司: 北京萬(wàn)慧達(dá)知識(shí)產(chǎn)權(quán)代理有限公司11111
• 代理人: 張錦波

1.一種2D虛擬模型的驅(qū)動(dòng)方法，其特征在于，所述方法包括：

對(duì)當(dāng)前人臉圖像進(jìn)行特征點(diǎn)定位，并獲得所述特征點(diǎn)的2D坐標(biāo)；

根據(jù)所述特征點(diǎn)的2D坐標(biāo)獲得所述特征點(diǎn)的正面化的3D坐標(biāo)；

獲取2D虛擬模型的3D坐標(biāo)，根據(jù)所述2D虛擬模型的3D坐標(biāo)與預(yù)先建立的人臉模型數(shù)據(jù)庫(kù)的表情基數(shù)據(jù)的回歸關(guān)系，建立所述2D虛擬模型的3D表情基；

根據(jù)所述正面化的3D坐標(biāo)與所述2D虛擬模型的3D表情基，獲取所述當(dāng)前人臉與所述2D虛擬模型的3D表情基的擬合系數(shù)；

根據(jù)所述擬合系數(shù)，驅(qū)動(dòng)所述2D虛擬模型。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對(duì)當(dāng)前人臉圖像進(jìn)行特征點(diǎn)定位，并獲得所述特征點(diǎn)的2D坐標(biāo)包括：

對(duì)所述特征點(diǎn)中的眼睛部位特征點(diǎn)提取特征向量，并對(duì)所述特征向量進(jìn)行特征降維；

將經(jīng)過(guò)特征降維的特征向量輸入預(yù)先訓(xùn)練的判別器以判別所述眼睛是否為閉眼狀態(tài)；

當(dāng)為閉眼狀態(tài)時(shí)，將所述眼睛部位上眼瞼的特征點(diǎn)坐標(biāo)移至下眼瞼的特征點(diǎn)位置。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述特征點(diǎn)的2D坐標(biāo)獲得所述特征點(diǎn)的正面化的3D坐標(biāo)包括：

根據(jù)預(yù)先訓(xùn)練的3D線性形狀增益模型獲取所述特征點(diǎn)的3D坐標(biāo)；

根據(jù)所述特征點(diǎn)的2D坐標(biāo)對(duì)所述3D坐標(biāo)進(jìn)行優(yōu)化以獲得所述特征點(diǎn)的正面化的3D坐標(biāo)。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述根據(jù)所述特征點(diǎn)的2D坐標(biāo)對(duì)所述3D坐標(biāo)進(jìn)行優(yōu)化以獲得所述特征點(diǎn)的正面化的3D坐標(biāo)包括：

根據(jù)所述特征點(diǎn)的2D坐標(biāo)和預(yù)設(shè)公式正面化所述3D坐標(biāo)。

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述獲取2D虛擬模型的3D坐標(biāo)包括：

獲取所述2D虛擬模型的特征點(diǎn)的2D坐標(biāo)；

根據(jù)所述2D虛擬模型的特征點(diǎn)的2D坐標(biāo)，計(jì)算所述2D虛擬模型的特征點(diǎn)的3D坐標(biāo)。

6.根據(jù)權(quán)利要求1或5所述的方法，其特征在于，所述根據(jù)所述正面化的3D坐標(biāo)與所述2D虛擬模型的3D表情基，獲取所述當(dāng)前人臉與所述2D虛擬模型表情基的擬合系數(shù)包括：

根據(jù)所述正面化的3D坐標(biāo)與所述2D虛擬模型的3D表情基，通過(guò)二次規(guī)劃獲取所述擬合系數(shù)。

7.根據(jù)權(quán)利要求6所述的方法，其特征在于，所述根據(jù)所述擬合系數(shù)，驅(qū)動(dòng)所述2D虛擬模型包括：

根據(jù)所述擬合系數(shù)，對(duì)所述2D虛擬模型的3D表情基進(jìn)行加權(quán)，獲取加權(quán)后的2D虛擬模型的特征點(diǎn)的3D坐標(biāo)；

將所述加權(quán)后的2D虛擬模型的特征點(diǎn)的3D坐標(biāo)轉(zhuǎn)換回2D坐標(biāo)；

根據(jù)所述轉(zhuǎn)換回的所述2D坐標(biāo)，驅(qū)動(dòng)所述2D虛擬模型。

8.根據(jù)權(quán)利要求5或7所述的方法，其特征在于，所述方法還包括：

根據(jù)所述2D虛擬模型的特征點(diǎn)的2D坐標(biāo)，對(duì)所述2D虛擬模型進(jìn)行三角剖分；

獲取剖分后的每個(gè)三角形內(nèi)的像素點(diǎn)坐標(biāo)。

9.根據(jù)權(quán)利要求8所述的方法，其特征在于，所述根據(jù)所述轉(zhuǎn)換回的所述2D坐標(biāo)，驅(qū)動(dòng)所述2D虛擬模型包括：

根據(jù)所述轉(zhuǎn)換回的所述2D坐標(biāo)，計(jì)算剖分后的所述每個(gè)三角形內(nèi)的像素點(diǎn)的位移；

根據(jù)所述位移，驅(qū)動(dòng)所述2D虛擬模型。

10.一種電子設(shè)備，其特征在于，所述設(shè)備包括：

特征點(diǎn)定位模塊，用于對(duì)當(dāng)前人臉圖像進(jìn)行特征點(diǎn)定位，并獲得所述特征點(diǎn)的2D坐標(biāo)；

正面化模塊，用于根據(jù)所述特征點(diǎn)的2D坐標(biāo)獲得所述特征點(diǎn)的正面化的3D坐標(biāo)；

2D虛擬模型的3D坐標(biāo)獲取模塊，用于獲取2D虛擬模型的3D坐標(biāo)；

建立表情基模塊，用于根據(jù)所述2D虛擬模型的3D坐標(biāo)與預(yù)先建立的人臉模型數(shù)據(jù)庫(kù)的表情基數(shù)據(jù)的回歸關(guān)系，建立所述2D虛擬模型的3D表情基；

擬合系數(shù)獲取模塊，用于根據(jù)所述正面化的3D坐標(biāo)與所述2D虛擬模型的3D表情基，獲取所述當(dāng)前人臉與所述2D虛擬模型的3D表情基的擬合系數(shù)；

驅(qū)動(dòng)模塊，用于根據(jù)所述擬合系數(shù)，驅(qū)動(dòng)所述2D虛擬模型。