[發(fā)明專利]一種漸變動(dòng)畫的生成方法及計(jì)算設(shè)備

有效

• 申請(qǐng)?zhí)枺?/td>: 201710618141.3
• 申請(qǐng)日: 2017-07-26
• 公開（公告）號(hào): CN107341841B
• 公開（公告）日: 2020-11-27
• 發(fā)明（設(shè)計(jì)）人: 呂仰銘;李志陽;李啟東;吳善思源;許清泉
• 申請(qǐng)（專利權(quán)）人: 廈門美圖之家科技有限公司
• 主分類號(hào): G06T13/20
• 分類號(hào): G06T13/20;G06T7/529
• 代理公司: 北京思睿峰知識(shí)產(chǎn)權(quán)代理有限公司 11396
• 代理人: 謝建云;趙愛軍

1.一種漸變動(dòng)畫的生成方法，所述方法適于在包含人臉的第一人臉圖像和第二人臉圖像的中間插入至少一個(gè)中間幀圖像，以生成人臉漸變動(dòng)畫，所述方法包括步驟：

按第一計(jì)算方式計(jì)算所述第一人臉圖像的第一投影矩陣和第一全圖三維模型；

根據(jù)所述第一投影矩陣和第一全圖三維模型以第二計(jì)算方式計(jì)算所述第一人臉圖像的第一紋理坐標(biāo)；

對(duì)所述第二人臉圖像依次執(zhí)行所述第一計(jì)算方式和第二計(jì)算方式的計(jì)算步驟，得到第二人臉圖像的第二投影矩陣、第二全圖三維模型和第二紋理坐標(biāo)；

對(duì)于每個(gè)待插入的中間幀：

根據(jù)所述第一投影矩陣、第二投影矩陣和待插入中間幀的位置計(jì)算待插入中間幀的投影矩陣；

根據(jù)所述第一全圖三維模型、第二全圖三維模型和待插入中間幀的位置計(jì)算待插入中間幀的全圖三維模型；

根據(jù)所述待插入中間幀的投影矩陣和全圖三維模型以第二計(jì)算方式計(jì)算該待插入中間幀的紋理坐標(biāo)；

根據(jù)所述待插入中間幀的紋理坐標(biāo)與第一紋理坐標(biāo)、第二紋理坐標(biāo)分別生成該待插入中間幀的第一圖像分量和第二圖像分量；

結(jié)合所述第一圖像分量和第二圖像分量生成中間幀圖像；以及由所述第一人臉圖像、第二人臉圖像和生成的中間幀圖像生成漸變動(dòng)畫。

2.如權(quán)利要求1所述的方法，其中，按第一計(jì)算方式計(jì)算人臉圖像的投影矩陣的步驟包括：

提取所述人臉圖像中的人臉特征點(diǎn)；

通過所提取的人臉特征點(diǎn)擬合得到人臉三維模型及該人臉三維模型對(duì)應(yīng)的投影矩陣。

3.如權(quán)利要求2所述的方法，其中，按第一計(jì)算方式計(jì)算人臉圖像的全圖三維模型的步驟包括：

根據(jù)所述人臉三維模型的深度差計(jì)算該人臉圖像中非人臉區(qū)域的深度，得到全圖三維模型。

4.如權(quán)利要求3所述的方法，其中，在提取人臉圖像中的人臉特征點(diǎn)的步驟之前，還包括步驟：

根據(jù)檢測到的人臉區(qū)域?qū)θ四槇D像進(jìn)行裁剪和/或縮放處理。

5.如權(quán)利要求4所述的方法，其中，通過所提取的人臉特征點(diǎn)擬合得到人臉三維模型和投影矩陣的步驟包括：

利用三維形變模型3DMM根據(jù)人臉圖像的人臉特征點(diǎn)生成人臉圖像的人臉三維模型和該人臉三維模型對(duì)應(yīng)的投影矩陣。

6.如權(quán)利要求5所述的方法，其中，按第一計(jì)算方式計(jì)算全圖三維模型的步驟包括：

將人臉三維模型上鼻子中心點(diǎn)與每個(gè)輪廓點(diǎn)的連線分別向外延伸預(yù)定距離，得到對(duì)應(yīng)的多個(gè)邊緣點(diǎn)；以及

從人臉三維模型上的頂點(diǎn)開始、按三角形關(guān)系依次連接所述多個(gè)邊緣點(diǎn)，得到全圖三維模型。

7.如權(quán)利要求6所述的方法，其中，根據(jù)投影矩陣和全圖三維模型以第二計(jì)算方式計(jì)算人臉圖像的紋理坐標(biāo)的步驟包括：

將所述投影矩陣和全圖三維模型相乘得到紋理坐標(biāo)。

8.如權(quán)利要求7所述的方法，其中，對(duì)于待插入的第i個(gè)中間幀，其對(duì)應(yīng)的投影矩陣MVP_i為：

其中，SumFrame表示待插入的中間幀的總幀數(shù)，SumFrme表示插入中間幀后的總幀數(shù)，MVP1表示第一投影矩陣，MVP2表示第二投影矩陣。

9.如權(quán)利要求8所述的方法，其中，對(duì)于待插入的第i個(gè)中間幀，其對(duì)應(yīng)的全圖三維模型M_expand_i為：

其中，SumFrame表示待插入的中間幀的總幀數(shù)，SumFrme表示插入中間幀后的總幀數(shù)，M_expand1表示第一全圖三維模型，M_expand2表示第二全圖三維模型。

10.如權(quán)利要求9所述的方法，其中，對(duì)于待插入的第i個(gè)中間幀，其對(duì)應(yīng)的第一圖像分量Image1_i為：

其中，SumFrme表示插入中間幀后的總幀數(shù)，T1表示第一紋理坐標(biāo)，T_i表示待插入的第i個(gè)中間幀的紋理坐標(biāo)。