[發(fā)明專利]視頻通話期間實(shí)現(xiàn)的方法、用戶終端及可讀存儲介質(zhì)

有效

• 申請?zhí)枺?/td>: 202110009103.4
• 申請日: 2015-10-29
• 公開（公告）號: CN112671996B
• 公開（公告）日: 2023-10-13
• 發(fā)明（設(shè)計(jì)）人: H·V·特貝爾
• 申請（專利權(quán)）人: 微軟技術(shù)許可有限責(zé)任公司
• 主分類號: H04N1/00
• 分類號: H04N1/00;H04N7/14
• 代理公司: 永新專利商標(biāo)代理有限公司 72002
• 代理人: 賈麗萍

1.一種系統(tǒng)，包括：

硬件處理電路；

包括指令的硬件存儲器，所述指令在被執(zhí)行時(shí)將所述硬件處理電路配置為執(zhí)行包括以下各項(xiàng)的操作：

確定要應(yīng)用在第一圖像中臉部上的一個(gè)或多個(gè)臉部位置中的相應(yīng)臉部位置處的修改；以及

將所確定的修改應(yīng)用于一個(gè)或多個(gè)其它圖像、應(yīng)用于所述一個(gè)或多個(gè)其它圖像中所述臉部上的所述相應(yīng)臉部位置，以生成包括所述相應(yīng)臉部位置處的修改的經(jīng)修改視頻。

2.根據(jù)權(quán)利要求1所述的系統(tǒng)，所述操作還包括：

以二維方式來識別所述臉部中的臉部特征點(diǎn)；以及

將三維三角網(wǎng)格擬合至所識別的臉部特征點(diǎn)，其中所述應(yīng)用所確定的修改包括將所確定的修改應(yīng)用在所述三維三角網(wǎng)格上的相應(yīng)位置處。

3.根據(jù)權(quán)利要求2所述的系統(tǒng)，其中，所述應(yīng)用所確定的修改包括：將所述三維三角網(wǎng)格中的三角形的紋理映射到所述三維三角網(wǎng)格的二維表示上；并且針對所述一個(gè)或多個(gè)圖像中的每個(gè)相應(yīng)圖像：

確定在所述三維三角網(wǎng)格的所述二維表示中與所述三維三角網(wǎng)格上的相應(yīng)位置相對應(yīng)的相應(yīng)位置；并且

將所述修改應(yīng)用于所述三維三角網(wǎng)格的所述二維表示中的相應(yīng)位置。

4.根據(jù)權(quán)利要求1所述的系統(tǒng)，所述操作還包括：響應(yīng)于用戶對繪圖工具按鈕的選擇而確定所述修改。

5.根據(jù)權(quán)利要求1所述的系統(tǒng)，所述操作還包括：響應(yīng)于用戶對所述修改的可選擇表示的選擇而確定所述修改。

6.根據(jù)權(quán)利要求1所述的系統(tǒng)，所述操作還包括確定所述一個(gè)或多個(gè)圖像中的每個(gè)相應(yīng)圖像中所述臉部上的臉部位置的相應(yīng)定位，所述確定包括：

以二維方式來識別所述臉部中的臉部特征點(diǎn)；以及

將三維三角網(wǎng)格擬合至所識別的臉部特征點(diǎn)，其中，預(yù)先計(jì)算的圖形對象包括要應(yīng)用在所述三維三角網(wǎng)格上的相應(yīng)位置處的數(shù)據(jù)。

7.根據(jù)權(quán)利要求1所述的系統(tǒng)，還包括相機(jī)，并且所述操作還包括：利用所述相機(jī)來捕獲所述第一圖像和所述一個(gè)或多個(gè)其它圖像。

8.根據(jù)權(quán)利要求1所述的系統(tǒng)，所述操作還包括：

接收包括所述第一圖像的視頻；

顯示用戶界面，所述用戶界面被配置為定義對所述視頻中的臉部的一個(gè)或多個(gè)修改，其中，所述確定要應(yīng)用在所述第一圖像中臉部上的一個(gè)或多個(gè)臉部位置中的相應(yīng)臉部位置處的修改是基于從所述用戶界面接收的輸入的。

9.根據(jù)權(quán)利要求1所述的系統(tǒng)，其中，應(yīng)用所述修改將預(yù)先計(jì)算的三維圖形對象應(yīng)用到所述臉部上。

10.根據(jù)權(quán)利要求1所述的系統(tǒng)，其中，應(yīng)用所述修改將一個(gè)或多個(gè)繪圖筆劃應(yīng)用于所述臉部上的一個(gè)或多個(gè)臉部位置。

11.根據(jù)權(quán)利要求1所述的系統(tǒng)，其中：

確定修改包括：

在所述第一圖像中識別指示所述修改的圖像數(shù)據(jù)，所述圖像數(shù)據(jù)包括所述修改的坐標(biāo)數(shù)據(jù)以及指示要對所述圖像做出的修改類型的效果數(shù)據(jù)；以及

應(yīng)用所確定的修改包括：

基于所述一個(gè)或多個(gè)其它圖像中的第二圖像，獲得指示所述第二圖像中所述臉部的三維表示的第一數(shù)據(jù)；

將所述第一數(shù)據(jù)轉(zhuǎn)換為第二數(shù)據(jù)，所述第二數(shù)據(jù)包括所述臉部的所述三維表示在二維圖像空間中的圖，其中，所述轉(zhuǎn)換生成所述圖以使得所述二維圖像空間中所述圖上的坐標(biāo)對于所述臉部的位置、表情或姿態(tài)在所述第一幀與所述第二幀之間的變化是不變的；

將所述坐標(biāo)數(shù)據(jù)變換到所述二維圖像空間；

基于經(jīng)變換的坐標(biāo)數(shù)據(jù)和所述效果數(shù)據(jù)來修改所述圖；

將經(jīng)修改的圖轉(zhuǎn)換為所述第二圖像中所述臉部的經(jīng)修改三維表示；以及

將所述第二圖像中所述臉部的所述經(jīng)修改三維表示變換為經(jīng)修改視頻的幀。