[發明專利]一種重建人臉三維模型的方法和裝置

在審

• 申請號: 201810032056.3
• 申請日: 2018-01-12
• 公開（公告）號: CN108062791A
• 公開（公告）日: 2018-05-22
• 發明（設計）人: 肖勝濤;劉洛麒;程斌
• 申請（專利權）人: 北京奇虎科技有限公司
• 主分類號: G06T17/00
• 分類號: G06T17/00;G06T3/00
• 代理公司: 北京市隆安律師事務所 11323
• 代理人: 權鮮枝;何立春

本發明公開了一種重建人臉三維模型的方法、裝置、電子設備和計算機可讀存儲介質，該方法包括：根據包含指定人臉的二維圖像/視頻，檢測出指定人臉的二維特征點集合S；構建初始的人臉三維模型，通過將初始的人臉三維模型中的三維特征點投影到二維空間后與S中的二維特征點進行擬合，估計出指定人臉的三維模型參數；根據估計出的指定人臉的三維模型參數，對圖像/視頻中的人臉進行特效處理。可見，通過本發明的技術方案，指定人臉三維模型參數根據圖像或視頻中的指定人臉的二維特征點獲取的，與指定人臉的特征相符合，然后利用三維模型參數對人臉進行特效處理，使得特效處理后的人臉更加真實生動，增強用戶的體驗。

技術領域

本發明涉及計算機技術領域，具體涉及一種重建人臉三維模型的方法、裝置、電子設備和計算機可讀存儲介質。

背景技術

目前，許多的智能終端的應用中都出現了對圖像或視頻中的人臉進行特效處理的功能模塊，特別是相機應用中。用戶在使用過程中，該功能模塊可將用戶選擇的特效模型添加到圖像或視頻中的人臉中。但是，現有技術中基本上都是將選擇的特效模型機械的添加當圖像或視頻中的人臉上，不免給人一種不真實的視覺體驗，降低用戶的體驗。

發明內容

鑒于上述問題，提出了本發明以便提供一種克服上述問題或者至少部分地解決上述問題的重建人臉三維模型的方法、裝置、電子設備和計算機可讀存儲介質。

根據本發明的一個方面，提供了一種重建人臉三維模型的方法，其中，該方法包括：

根據包含指定人臉的二維圖像/視頻，檢測出所述指定人臉的二維特征點集合S；

構建初始的人臉三維模型，通過將所述初始的人臉三維模型中的三維特征點投影到二維空間后與所述S中的二維特征點進行擬合，估計出所述指定人臉的三維模型參數；

根據估計出的指定人臉的三維模型參數，對圖像/視頻中的人臉進行特效處理。

可選地，通過將所述初始的人臉三維模型中的三維特征點投影到二維空間后與所述S中的二維特征點進行擬合，估計出所述指定人臉的三維模型參數包括：

根據公式||Proj(RV)-S||2進行擬合計算，獲得該公式收斂時的人臉三維模型參數；其中：RV是初始的人臉三維模型，V是人臉三維重建點集合，R為旋轉平移矩陣；Proj表示三維空間點在二維空間上的投影。

可選地，所述構建初始的人臉三維模型包括：

確定人臉三維重建點集合其中，是人臉的三維平均模型，A是人臉三維重建時主成分分析PCA方法的基，α是三維重建系數；

為旋轉平移矩陣R所包括的三個旋轉角度和三個水平移動變量設定初始值；

獲得初始的人臉三維模型RV。

可選地，

根據人臉三維模型庫中的各人臉三維模型，計算人臉的三維平均模型以及計算人臉三維重建時主成分分析PCA方法的基A。