[發明專利]用戶頭像的替換方法、裝置和終端設備

在審

• 申請號: 201710676294.3
• 申請日: 2017-08-09
• 公開（公告）號: CN107481318A
• 公開（公告）日: 2017-12-15
• 發明（設計）人: 張學勇
• 申請（專利權）人: 廣東歐珀移動通信有限公司
• 主分類號: G06T17/00
• 分類號: G06T17/00;G06K9/00
• 代理公司: 北京清亦華知識產權代理事務所(普通合伙)11201
• 代理人: 張潤

1.一種用戶頭像的替換方法，其特征在于，包括：

通過非均勻結構光獲取包括用戶的至少一種表情和/或面部動作的用戶頭像的結構光圖像；

對所述結構光圖像進行計算處理獲得所述用戶頭像的深度圖像；

根據所述深度圖像，結合所述用戶頭像的色彩信息獲取所述用戶頭像的至少一種表情和/或面部動作的三維模型；

根據待替換視頻中包括特定人物的每幀視頻圖像的三維模型中特定人物的表情和/或面部動作，查找獲得所述用戶頭像的三維模型中具有相同表情和/或面部動作的三維模型；

將所述待替換視頻中包括特定人物的每幀視頻圖像的三維模型中的特定人物頭像，替換為查找獲得的三維模型中的用戶頭像。

2.根據權利要求1所述的方法，其特征在于，所述將所述待替換視頻中包括特定人物的每幀視頻圖像的三維模型中的特定人物頭像，替換為查找獲得的三維模型中的用戶頭像之后，還包括：

對替換后的視頻圖像與所述待替換視頻中未進行替換的視頻圖像進行重新存儲和編碼，獲得替換后的視頻。

3.根據權利要求1所述的方法，其特征在于，所述通過非均勻結構光獲取包括用戶的至少一種表情和/或面部動作的用戶頭像的結構光圖像包括：

在所述用戶做出至少一種表情和/或面部動作時，利用不可見光光源向用戶頭像所處的空間投射經編碼的非均勻結構光，并利用不可見光相機對所述用戶頭像的圖像進行采集，得到帶有非均勻結構光圖案的包括用戶的至少一種表情和/或面部動作的用戶頭像的結構光圖像。

4.根據權利要求1所述的方法，其特征在于，所述根據所述深度圖像，結合所述用戶頭像的色彩信息獲取所述用戶頭像的至少一種表情和/或面部動作的三維模型包括：

將分別從所述深度圖像中提取到的所述用戶頭像的特征以及從所述色彩信息中提取到的所述用戶頭像的特征進行配準和特征融合處理；

根據融合后的特征，獲取所述用戶頭像的三維模型。

5.根據權利要求1-4任意一項所述的方法，其特征在于，所述待替換視頻為采用三維技術拍攝的視頻，所述根據待替換視頻中包括特定人物的每幀視頻圖像的三維模型中特定人物的表情和/或面部動作，查找獲得所述用戶頭像的三維模型中具有相同表情和/或面部動作的三維模型之前，還包括：

對所述待替換視頻中包括特定人物的每一幀視頻圖像中，所述特定人物的表情和/或面部動作進行三維解析，獲得所述待替換視頻中包括特定人物的每幀視頻圖像的三維模型。

6.一種用戶頭像的替換裝置，其特征在于，包括：

獲取模塊，用于通過非均勻結構光獲取包括用戶的至少一種表情和/或面部動作的用戶頭像的結構光圖像；

計算模塊，用于對所述獲取模塊獲取的結構光圖像進行計算處理獲得所述用戶頭像的深度圖像；

所述獲取模塊，還用于根據所述深度圖像，結合所述用戶頭像的色彩信息獲取所述用戶頭像的至少一種表情和/或面部動作的三維模型；

查找模塊，用于根據待替換視頻中包括特定人物的每幀視頻圖像的三維模型中特定人物的表情和/或面部動作，查找獲得所述用戶頭像的三維模型中具有相同表情和/或面部動作的三維模型；

替換模塊，用于將所述待替換視頻中包括特定人物的每幀視頻圖像的三維模型中的特定人物頭像，替換為所述查找模塊查找獲得的三維模型中的用戶頭像。

7.根據權利要求6所述的裝置，其特征在于，還包括：

編碼模塊，用于對所述替換模塊替換后的視頻圖像與所述待替換視頻中未進行替換的視頻圖像進行重新存儲和編碼，獲得替換后的視頻。

8.根據權利要求6所述的裝置，其特征在于，

所述獲取模塊，具體用于在所述用戶做出至少一種表情和/或面部動作時，利用不可見光光源向用戶頭像所處的空間投射經編碼的非均勻結構光，并利用不可見光相機對所述用戶頭像的圖像進行采集，得到帶有非均勻結構光圖案的包括用戶的至少一種表情和/或面部動作的用戶頭像的結構光圖像。

9.根據權利要求6所述的裝置，其特征在于，

所述獲取模塊，具體用于將分別從所述深度圖像中提取到的所述用戶頭像的特征以及從所述色彩信息中提取到的所述用戶頭像的特征進行配準和特征融合處理；以及根據融合后的特征，獲取所述用戶頭像的三維模型。