[發明專利]用于生成圖像的方法和裝置

在審

• 申請號: 202010412294.4
• 申請日: 2020-05-15
• 公開（公告）號: CN111599002A
• 公開（公告）日: 2020-08-28
• 發明（設計）人: 姚錕;洪智濱;何聲一;秦飛
• 申請（專利權）人: 北京百度網訊科技有限公司
• 主分類號: G06T17/00
• 分類號: G06T17/00;G06K9/00
• 代理公司: 北京英賽嘉華知識產權代理有限責任公司 11204
• 代理人: 王達佐;馬曉亞

1.一種用于生成圖像的方法，包括：

獲取第一臉部圖像中的第一臉部關鍵點信息和第二臉部圖像中的第二臉部關鍵點信息；

根據所述第一臉部關鍵點信息確定臉部表情參數；

根據所述第二臉部關鍵點信息確定臉部姿態參數和臉部形狀參數；

基于所述臉部表情參數、所述臉部形狀參數和所述臉部姿態參數生成第三臉部圖像。

2.根據權利要求1所述的方法，其中，所述基于所述臉部表情參數、所述臉部形狀參數和所述臉部姿態參數生成第三臉部圖像，包括：

根據所述第二臉部圖像生成臉部紋理圖；

融合所述臉部表情參數和所述臉部形狀參數得到臉部模型；

基于所述臉部姿態參數，利用所述臉部紋理圖渲染所述臉部模型。

3.根據權利要求2所述的方法，其中，所述基于所述臉部姿態參數，利用所述臉部紋理圖渲染所述臉部模型之后，所述方法還包括：

響應于確定所述第一臉部圖像中嘴部為張開狀態，所述第二臉部圖像中嘴部為閉合狀態，獲取所述第一臉部圖像的口腔圖像；

將所述口腔圖像填充于渲染后的所述臉部模型的口腔區域。

4.根據權利要求3所述的方法，其中，所述將所述口腔圖像填充于渲染后的所述臉部模型的口腔區域，包括：

獲取渲染得到的圖像和所述第二臉部圖像的掩膜；

根據所述掩膜獲取渲染得到的圖像的顏色和所述第二臉部圖像的顏色；

根據所獲取的顏色對所述口腔圖像進行顏色轉換得到待填充口腔圖像；

將所述待填充口腔圖像填充于渲染后的所述臉部模型的口腔區域。

5.根據權利要求2所述的方法，其中，所述基于所述臉部姿態參數，利用所述臉部紋理圖渲染所述臉部模型之后，所述方法還包括：

響應于確定所述臉部模型中眼部關鍵點信息缺失，獲取所述第一臉部圖像中的眼部圖像；

將所述眼部圖像填充于渲染后的所述臉部模型的眼部區域。

6.根據權利要求1所述的方法，其中，所述第一臉部圖像包括二維臉部圖像；以及

所述根據所述第一臉部關鍵點信息確定臉部表情參數，包括：

將所述第一臉部關鍵點信息映射到三維空間，得到第三臉部關鍵點信息；

根據所述第三臉部關鍵點信息與預先建立的基準臉部模型的關鍵點信息確定臉部表情參數。

7.根據權利要求1-6中任一項所述的方法，其中，所述第二臉部圖像包括二維臉部圖像；以及

所述根據所述第二臉部關鍵點信息確定臉部姿態參數和臉部形狀參數，包括：

將所述第二臉部關鍵點信息映射到三維空間，得到第四臉部關鍵點信息；

根據所述第四臉部關鍵點信息與預先建立的基準臉部模型的關鍵點信息確定臉部姿態參數和臉部形狀參數。

8.一種用于生成圖像的裝置，包括：

獲取單元，被配置成獲取第一臉部圖像中的第一臉部關鍵點信息和第二臉部圖像中的第二臉部關鍵點信息；

第一確定單元，被配置成根據所述第一臉部關鍵點信息確定臉部表情參數；

第二確定單元，被配置成根據所述第二臉部關鍵點信息確定臉部姿態參數和臉部形狀參數；

生成單元，被配置成基于所述臉部表情參數、所述臉部形狀參數和所述臉部姿態參數生成第三臉部圖像。

9.根據權利要求8所述的裝置，其中，所述生成單元，包括：

生成子單元，被配置成根據所述第二臉部圖像生成臉部紋理圖；

融合子單元，被配置成融合所述臉部表情參數和所述臉部形狀參數得到臉部模型；

渲染子單元，被配置成基于所述臉部姿態參數，利用所述臉部紋理圖渲染所述臉部模型。