[發(fā)明專利]一種基于三維人臉模型擬合的面部對齊方法

在審

• 申請?zhí)枺?/td>: 201711238476.9
• 申請日: 2017-11-30
• 公開（公告）號: CN108022308A
• 公開（公告）日: 2018-05-11
• 發(fā)明（設(shè)計）人: 夏春秋
• 申請（專利權(quán)）人: 深圳市唯特視科技有限公司
• 主分類號: G06T19/20
• 分類號: G06T19/20;G06N3/04;G06K9/46;G06K9/62
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.一種基于三維人臉模型擬合的面部對齊方法，其特征在于，主要包括3D面部表示(一)；卷積神經(jīng)網(wǎng)絡(luò)(CNN)的結(jié)構(gòu)(二)；標(biāo)記擬合約束(LFC)(三)；輪廓擬合約束(CFC)(四)；尺度不變特征變換(SIFT)配對約束(SPC)(五)。

2.基于權(quán)利要求書1所述的面部對齊方法，其特征在于，訓(xùn)練一個卷積神經(jīng)網(wǎng)絡(luò)(CNN)用于將密集的3D面部形狀擬合成單個輸入的面部圖像；利用密集的三維形狀表示來施加多個約束，例如，標(biāo)記擬合約束、輪廓擬合約束和SIFT配對約束。

3.基于權(quán)利要求書1所述的3D面部表示(一)，其特征在于，將面部的密集三維形狀表示為S，包含Q個頂點的三維位置：

S = x 1 x 2 ... x Q y 1 y 2 ... y Q z 1 z 2 ... z Q - - - ( 1 ) ]]>

為了計算面部的S，按照3D模型來表示3D形狀的基礎(chǔ)：

S = S ‾ + Σ i = 1 N i d p i d i S i d i + Σ i = 1 N exp p exp i S exp i - - - ( 2 ) ]]>

其中，面部形狀S是平均形狀的總和，并且加權(quán)主成分分析形狀以和與相應(yīng)權(quán)重和為基礎(chǔ)；以為基礎(chǔ)的199個形狀表示高或矮、輕或重、男或女等，用以為基礎(chǔ)的29種形狀表示表情變化，如張嘴、微笑、親吻等；每個基數(shù)有Q＝53215個頂點，它們對應(yīng)于所有其它基底上的頂點。