[發明專利]用于化身生成、渲染和動畫的系統和方法

在審

• 申請號: 202010021750.2
• 申請日: 2012-04-09
• 公開（公告）號: CN111275795A
• 公開（公告）日: 2020-06-12
• 發明（設計）人: 童曉峰;李文龍;杜楊洲;W.胡;Y.張;J.李
• 申請（專利權）人: 英特爾公司
• 主分類號: G06T11/60
• 分類號: G06T11/60;H04N7/15
• 代理公司: 中國專利代理(香港)有限公司 72001
• 代理人: 姜冰

1.一種用于在第一用戶裝置與遠程用戶裝置之間的通信期間的化身生成、渲染和動畫的系統，所述系統包括：

照相機，配置成捕捉圖像；

通信模塊，配置成在所述第一與所述遠程用戶裝置之間啟動并建立通信，并且在所述第一與所述遠程用戶裝置之間傳送和接收信息；以及

一個或更多存儲媒體，已在其上單獨或組合地存儲指令，所述指令在由一個或更多處理器執行時產生以下操作，包括：

生成化身模型，包括：

為所述化身模型捕捉圖像；

跟蹤所述圖像中的面部；

分析所述圖像以便提取面部特點；以及

基于所述面部特點自動生成所述化身模型；

生成化身參數，包括：

啟動通信；

為所述化身參數捕捉圖像；

檢測所述圖像中的面部；

從所述面部確定面部特點；以及

將所述面部特點轉換成化身參數；以及

傳送所生成的化身模型和化身參數。

2.如權利要求1所述的系統，其中從所述面部確定面部特點包括：

檢測和識別所述面部中的面部標志，所述面部標志包括所述圖像中所述面部的前額、下巴、眼睛、鼻子、嘴和面部輪廓中的至少一個；以及

至少部分基于所述識別的面部標志生成面部參數，所述面部參數包括一個或更多關鍵點和在所述一個或更多關鍵點的至少兩個關鍵點之間形成連接的邊緣。

3.如權利要求1所述的系統，其中所述化身模型和化身參數用于在遠程裝置上生成化身，所述化身基于所述面部特點。

4.如權利要求1所述的系統，其中所述化身模型和化身參數用于在虛擬空間中生成化身，所述化身基于所述面部特點。

5.如權利要求1所述的系統，其中所述指令在由一個或更多處理器執行時產生以下另外的操作：

接收遠程化身模型和遠程化身參數中的至少一個。

6.如權利要求6所述的系統，還包括顯示器，其中所述指令在由一個或更多處理器執行時產生以下另外的操作：

基于所述遠程化身參數來渲染所述遠程化身模型以允許無失真或幾乎無失真地顯示基于所述遠程化身模型的化身；以及

基于所述渲染的遠程化身模型來顯示所述化身。

7.如權利要求7所述的系統，其中所述指令在由一個或更多處理器執行時產生以下另外的操作：

基于所述遠程化身參數以動畫表現所述顯示的化身。

8.一種用于在第一用戶裝置與遠程用戶裝置之間的通信期間的化身生成、渲染和動畫的設備，所述設備包括：

化身模型生成模塊，配置成為所述化身模型捕捉圖像；跟蹤所述圖像中的面部；分析所述圖像以便提取面部特點；以及基于所述面部特點自動生成所述化身模型；

通信模塊，配置成在所述第一與所述遠程用戶裝置之間啟動和建立通信；

面部檢測模塊，配置成檢測所述用戶的圖像中的面部區域，并且檢測和識別所述面部的一個或更多面部特點；以及

化身控制模塊，配置成將所述面部特點轉換成化身參數；

其中所述通信模塊配置成傳送生成的化身模型和化身參數。

9.如權利要求8所述的設備，其中所述面部檢測模塊包括：

標志檢測模塊，配置成識別所述圖像中所述面部區域的面部標志，所述面部標志包括所述面部的前額、下巴、眼睛、鼻子、嘴和面部輪廓中的至少一個；以及

面部參數模塊，配置成至少部分基于所述識別的面部標志來生成面部參數，所述面部參數包括一個或更多關鍵點和在所述一個或更多關鍵點的至少兩個關鍵點之間形成連接的邊緣。

10.如權利要求8所述的設備，其中所述化身模型和化身參數用于在所述遠程裝置上生成化身，所述化身基于所述面部特點。

11.如權利要求8所述的設備，其中所述通信模塊配置成接收遠程化身模型和遠程化身參數中的至少一個。