[發(fā)明專利]一種表情遷移方法和電子設(shè)備

在審

• 申請?zhí)枺?/td>: 201610099881.6
• 申請日: 2016-02-24
• 公開（公告）號(hào): CN107123079A
• 公開（公告）日: 2017-09-01
• 發(fā)明（設(shè)計(jì)）人: 武俊敏
• 申請（專利權(quán)）人: 掌贏信息科技（上海）有限公司
• 主分類號(hào): G06T3/00
• 分類號(hào): G06T3/00
• 代理公司: 北京萬慧達(dá)知識(shí)產(chǎn)權(quán)代理有限公司11111
• 代理人: 張錦波

技術(shù)領(lǐng)域

本發(fā)明涉及視頻領(lǐng)域，特別涉及一種表情遷移方法和電子設(shè)備。

背景技術(shù)

隨著即時(shí)視頻的普及，越來越多的用戶希望通過表情遷移，將視頻中的人臉遷移至其他人臉或者遷移模型上，從而滿足自身的個(gè)性化需求，提升在視頻交互過程中的用戶體驗(yàn)。

現(xiàn)有技術(shù)提供了一種表情遷移方法，在表情遷移過程中，通過線性擬合的方式，實(shí)現(xiàn)表情遷移。

在使用技術(shù)所采用的方法時(shí)，由于線性擬合的局限性，從而使得無法獲得較好的表情遷移效果，從而降低了用戶體驗(yàn)。

發(fā)明內(nèi)容

為了獲取更好的表情遷移效果，提高用戶體驗(yàn)，本發(fā)明實(shí)施例提供了一種表情遷移方法和電子設(shè)備。所述技術(shù)方案如下：

第一方面，提供了一種表情遷移方法，所述方法包括：

獲取視頻幀中人臉的正面特征點(diǎn)；

將所述正面特征點(diǎn)與表情庫中的表情進(jìn)行擬合，生成第一擬合向量；

對所述第一擬合向量進(jìn)行非線性變換，生成第二擬合向量；

根據(jù)所述第二擬合向量，對目標(biāo)對象進(jìn)行表情遷移。

結(jié)合第一方面，在第一種可能的實(shí)現(xiàn)方式中，所述獲取視頻幀中人臉的正面特征點(diǎn)包括：

獲取視頻幀中人臉的特征點(diǎn)；

對所述人臉的特征點(diǎn)進(jìn)行姿態(tài)估計(jì)，生成人臉姿態(tài)估計(jì)參數(shù)；

根據(jù)所述人臉姿態(tài)估計(jì)參數(shù)，獲取所述人臉的正面特征點(diǎn)。

結(jié)合第一方面或第一方面的第一種可能的實(shí)現(xiàn)方式，在第二種可能的實(shí)現(xiàn)方式中，所述將所述正面特征點(diǎn)與表情庫中的表情進(jìn)行擬合，生成第一擬合向量包括：

通過回歸分析對所述表情庫中的表情和所述正面特征點(diǎn)進(jìn)行擬合，生成所述第一擬合向量。

結(jié)合第一方面至第一方面的第二種任意一種可能的實(shí)現(xiàn)方式，在第三種可能的實(shí)現(xiàn)方式中，所述對所述第一擬合向量進(jìn)行非線性變換，生成第二擬合向量之前，所述方法還包括：

刪除所述第一擬合向量中絕對值小于或者等于預(yù)設(shè)閾值的部分?jǐn)M合系數(shù)，生成第一中間向量。

結(jié)合第一方面的第三種可能的實(shí)現(xiàn)方式，在第四種可能的實(shí)現(xiàn)方式中，所述對所述第一擬合向量進(jìn)行非線性變換，生成第二擬合向量包括：

對所述表情庫中的表情和由所述第一中間向量擬合出的人臉的特征點(diǎn)進(jìn)行線性擬合，生成第二中間向量；

對所述第二中間向量進(jìn)行非線性變換，生成所述第二擬合向量。

第二方面，提供了一種電子設(shè)備，所述電子設(shè)備包括：

特征點(diǎn)獲取模塊，用于獲取視頻幀中人臉的正面特征點(diǎn)；

擬合模塊，用于將所述正面特征點(diǎn)與表情庫中的表情進(jìn)行擬合，生成第一擬合向量；

非線性變換模塊，用于對所述第一擬合向量進(jìn)行非線性變換，生成第二擬合向量；

表情對象遷移模塊，用于根據(jù)所述第二擬合向量，對目標(biāo)對象進(jìn)行表情遷移。

結(jié)合第二方面，在第一種可能的實(shí)現(xiàn)方式中，所述特征點(diǎn)獲取模塊具體用于：

獲取視頻幀中人臉的特征點(diǎn)；

對所述人臉的特征點(diǎn)進(jìn)行姿態(tài)估計(jì)，生成人臉姿態(tài)估計(jì)參數(shù)；

根據(jù)所述人臉姿態(tài)估計(jì)參數(shù)，獲取所述人臉的正面特征點(diǎn)。

結(jié)合第二方面或第二方面的第一種可能的實(shí)現(xiàn)方式，在第二種可能的實(shí)現(xiàn)方式中，所述擬合模塊具體用于：

通過回歸分析對所述表情庫中的表情和所述正面特征點(diǎn)進(jìn)行擬合，生成所述第一擬合向量。

結(jié)合第二方面至第二方面的第二種任意一種可能的實(shí)現(xiàn)方式，在第三種可能的實(shí)現(xiàn)方式中，所述設(shè)備還包括處理模塊，用于：

刪除所述第一擬合向量中絕對值小于或者等于預(yù)設(shè)閾值的部分?jǐn)M合系數(shù)，生成第一中間向量。

結(jié)合第二方面的第三種可能的實(shí)現(xiàn)方式，在第四種可能的實(shí)現(xiàn)方式中，所述非線性變換模塊用于：

對所述表情庫中的表情和由所述第一中間向量擬合出的人臉的特征點(diǎn)進(jìn)行線性擬合，生成第二中間向量；

對所述第二中間向量進(jìn)行非線性變換，生成所述第二擬合向量。

第三方面，提供了一種電子設(shè)備，所述電子設(shè)備包括存儲(chǔ)器以及與所述存儲(chǔ)器連接的處理器，所述存儲(chǔ)器用于存儲(chǔ)一組程序代碼，所述處理器調(diào)用所述存儲(chǔ)器所存儲(chǔ)的程序代碼用于執(zhí)行以下操作：

獲取視頻幀中人臉的正面特征點(diǎn)；

將所述正面特征點(diǎn)與表情庫中的表情進(jìn)行擬合，生成第一擬合向量；

對所述第一擬合向量進(jìn)行非線性變換，生成第二擬合向量；

根據(jù)所述第二擬合向量，對目標(biāo)對象進(jìn)行表情遷移。