[發(fā)明專利]三維人臉動畫控制系統(tǒng)及其控制方法

在審

• 申請?zhí)枺?/td>: 201711292466.3
• 申請日: 2017-12-08
• 公開（公告）號: CN109903360A
• 公開（公告）日: 2019-06-18
• 發(fā)明（設(shè)計）人: 王虎崗;毛衛(wèi)柱;張嚴嚴;豆彩霞;王忠偉
• 申請（專利權(quán)）人: 浙江舜宇智能光學技術(shù)有限公司
• 主分類號: G06T13/20
• 分類號: G06T13/20;G06K9/00
• 代理公司: 寧波理文知識產(chǎn)權(quán)代理事務(wù)所(特殊普通合伙) 33244
• 代理人: 李高峰;孟湘明

1.一三維人臉動畫控制系統(tǒng)，其中所述三維人臉動畫控制系統(tǒng)基于一被測人臉表情數(shù)據(jù)驅(qū)動一動畫角色的表情，其特征在于，包括：

一表情處理模塊，其中所述表情處理模塊提供所述被測人臉表情數(shù)據(jù)；和

一驅(qū)動模塊，其中所述驅(qū)動模塊被可通信地連接于所述表情處理模塊，其中所述驅(qū)動模塊以將所述表情處理模塊提供的所述被測人臉表情數(shù)據(jù)對應(yīng)于所述動畫角色的表情的方式實時地驅(qū)動所述動畫角色的表情。

2.根據(jù)權(quán)利要求1所述的控制系統(tǒng)，進一步包括一人臉檢測模塊和被可通信地連接于所述人臉檢測模塊的一三維人臉重建模塊，所述表情處理模塊被可通信地連接于所述三維人臉重建模塊，其中所述人臉檢測模塊檢測一被測人臉圖像中人臉的特征點，所述三維人臉重建模塊根據(jù)所述被測人臉圖像中人臉的特征點建立一被測人臉三維模塊，其中所述表情處理模塊基于所述被測人臉三維模塊提供所述被測人臉表情數(shù)據(jù)。

3.根據(jù)權(quán)利要求2所述的控制系統(tǒng)，進一步包括一圖像采集模塊，其中所述圖像采集模塊被可通信地連接于所述人臉檢測模塊，其中所述人臉檢測模塊檢測被所述圖像采集模塊采集的所述被測人臉圖像。

4.根據(jù)權(quán)利要求3所述的控制系統(tǒng)，其中所述圖像采集模塊是一RGB攝像模組，其中所述RGB攝像模組以拍攝人臉的方式采集所述被測人臉圖像。

5.根據(jù)權(quán)利要求3所述的控制系統(tǒng)，其中所述圖像采集模塊被可通信地連接于一RGB攝像模組，其中所述RGB攝像模組以拍攝人臉的方式采集所述被測人臉圖像。

6.根據(jù)權(quán)利要求2所述的控制系統(tǒng)，進一步包括一特效模塊，其中所述特效模塊被可通信地連接于一人臉檢測模塊，其中在所述人臉檢測模塊未檢測到人臉時，所述特效模塊展示預(yù)設(shè)的特效。

7.根據(jù)權(quán)利要求2所述的控制系統(tǒng)，其中所述人臉檢測模塊檢測所述被測人臉圖像中人臉的68個特征點。

8.根據(jù)權(quán)利要求1所述的控制系統(tǒng)，其中所述表情處理模塊進一步包括一表情傳輸模塊和被可通信地連接于所述表情傳輸模塊的一表情合成模塊，其中所述表情傳輸模塊用于生成一組基于被測人臉的特定三維模型的基本表情模型，所述表情合成模塊用于計算所述基本表情模型各占的權(quán)重比，其中所述基本表情模型各占的權(quán)重比為所述被測人臉表情數(shù)據(jù)。

9.根據(jù)權(quán)利要求8所述的控制系統(tǒng)，其中被測人臉的特定三維模型的基本表情模型為所述被測人臉在自然狀態(tài)下的所述三維人臉模型。

10.一三維人臉動畫控制方法，其特征在于，包括步驟：

采集一被測人臉的二維RGB圖像；

檢測和識別所述被測人臉的二維RGB圖像以獲取一被測人臉特征點數(shù)據(jù)；

基于所述被測人臉特征點數(shù)據(jù)，生成一被測人臉的三維人臉模型；

傳輸標準人臉模型的一組基本表情模型至所述被測人臉的在自然表情下的三維人臉模型，以生成一組基于被測人臉的三維人臉模型的基本表情模型；

計算所述基于被測人臉的基本表情模型合成所述被測人臉的三維人臉模型各所占的權(quán)重比數(shù)據(jù)；和

將所述權(quán)重比數(shù)據(jù)分別賦值于一動畫角色的一組相應(yīng)數(shù)量的表情模型，以合成該動畫角色的表情模型。

11.根據(jù)權(quán)利要求10所述的三維人臉動畫控制方法，其中所述檢測和識別所述被測人臉的二維RGB圖像以獲取一被測人臉特征點數(shù)據(jù)的步驟基于深度學習算法執(zhí)行。

12.根據(jù)權(quán)利要求10所述的三維人臉動畫控制方法，其中所述基于單攝像模組的三維人臉動畫控制方法還包括步驟：

采集被測人臉在自然狀態(tài)下的被測人臉二維RGB圖像；

檢測和識別所述被測人臉的二維RGB圖像以獲取一被測人臉特征點數(shù)據(jù)；

基于所述被測人臉特征點數(shù)據(jù)，生成一被測人臉在自然狀態(tài)下的三維人臉模型；和

存儲所述被測人臉在自然狀態(tài)下的三維人臉模型。