[發(fā)明專利]表情重定向方法、裝置、設(shè)備和介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202110412843.2
• 申請(qǐng)日: 2021-04-16
• 公開（公告）號(hào): CN113066156A
• 公開（公告）日: 2021-07-02
• 發(fā)明（設(shè)計(jì)）人: 李團(tuán)輝
• 申請(qǐng)（專利權(quán)）人: 廣州虎牙科技有限公司
• 主分類號(hào): G06T13/40
• 分類號(hào): G06T13/40;G06K9/00
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

本發(fā)明實(shí)施例公開了一種表情重定向方法、裝置、設(shè)備和介質(zhì)。該方法包括：實(shí)時(shí)獲取直播視頻幀中的人臉圖像，并根據(jù)標(biāo)準(zhǔn)表情基組確定與所述人臉圖像對(duì)應(yīng)的標(biāo)準(zhǔn)表情系數(shù)；確定與所述標(biāo)準(zhǔn)表情系數(shù)對(duì)應(yīng)的個(gè)性化表情系數(shù)，其中，所述個(gè)性化表情系數(shù)與預(yù)先生成的目標(biāo)個(gè)性化虛擬形象表情基組是匹配的；將所述個(gè)性化表情系數(shù)使用到所述目標(biāo)個(gè)性化虛擬形象表情基組上，以驅(qū)動(dòng)與所述目標(biāo)個(gè)性化虛擬形象表情基組對(duì)應(yīng)的個(gè)性化虛擬形象的表情。上述技術(shù)方案能夠解決主播驅(qū)動(dòng)虛擬形象時(shí)虛擬形象表情不自然的問(wèn)題。

技術(shù)領(lǐng)域

本發(fā)明實(shí)施例涉及計(jì)算機(jī)視覺(jué)技術(shù)領(lǐng)域，尤其涉及一種表情重定向方法、裝置、設(shè)備和介質(zhì)。

背景技術(shù)

隨著直播行業(yè)的流行，越來(lái)越多的人作為主播進(jìn)入了直播行業(yè)。但是往往會(huì)面臨一些問(wèn)題，比如主播對(duì)自己的形象可能不夠自信，擔(dān)心直接將真實(shí)容貌暴露在直播環(huán)境之中會(huì)對(duì)直播效果產(chǎn)生影響，又比如主播總是以單一的自我形象進(jìn)行直播，缺少多樣性，限制了許多有趣的直播模式和玩法。因此，虛擬直播應(yīng)運(yùn)而生，讓主播可以在背后驅(qū)動(dòng)虛擬形象進(jìn)行個(gè)性化直播。

當(dāng)主播驅(qū)動(dòng)虛擬形象進(jìn)行個(gè)性化直播時(shí)，通過(guò)自己的表情變化來(lái)驅(qū)動(dòng)虛擬形象的表情變化。然而，由于驅(qū)動(dòng)模型的表情基組和虛擬形象表情基組之間通常會(huì)存在語(yǔ)義差異，導(dǎo)致將使用驅(qū)動(dòng)模型的表情基組學(xué)習(xí)到的表情系數(shù)遷移到虛擬形象表情基組上時(shí)會(huì)出現(xiàn)虛擬形象表情不自然問(wèn)題。

發(fā)明內(nèi)容

本發(fā)明實(shí)施例提供一種表情重定向方法、裝置、設(shè)備和介質(zhì)，以解決主播驅(qū)動(dòng)虛擬形象時(shí)虛擬形象表情不自然的問(wèn)題。

第一方面，本發(fā)明實(shí)施例提供了一種表情重定向方法，包括：

實(shí)時(shí)獲取直播視頻幀中的人臉圖像，并根據(jù)標(biāo)準(zhǔn)表情基組確定與所述人臉圖像對(duì)應(yīng)的標(biāo)準(zhǔn)表情系數(shù)；

確定與所述標(biāo)準(zhǔn)表情系數(shù)對(duì)應(yīng)的個(gè)性化表情系數(shù)，其中，所述個(gè)性化表情系數(shù)與預(yù)先生成的目標(biāo)個(gè)性化虛擬形象表情基組是匹配的；

將所述個(gè)性化表情系數(shù)使用到所述目標(biāo)個(gè)性化虛擬形象表情基組上，以驅(qū)動(dòng)與所述目標(biāo)個(gè)性化虛擬形象表情基組對(duì)應(yīng)的個(gè)性化虛擬形象的表情。

第二方面，本發(fā)明實(shí)施例還提供了一種表情重定向裝置，包括：

標(biāo)準(zhǔn)表情系數(shù)確定模塊，用于實(shí)時(shí)獲取直播視頻幀中的人臉圖像，并根據(jù)標(biāo)準(zhǔn)表情基組確定與所述人臉圖像對(duì)應(yīng)的標(biāo)準(zhǔn)表情系數(shù)；

個(gè)性化表情系數(shù)確定模塊，用于確定與所述標(biāo)準(zhǔn)表情系數(shù)對(duì)應(yīng)的個(gè)性化表情系數(shù)，其中，所述個(gè)性化表情系數(shù)與預(yù)先生成的目標(biāo)個(gè)性化虛擬形象表情基組是匹配的；

表情重定向模塊，用于將所述個(gè)性化表情系數(shù)使用到所述目標(biāo)個(gè)性化虛擬形象表情基組上，以驅(qū)動(dòng)與所述目標(biāo)個(gè)性化虛擬形象表情基組對(duì)應(yīng)的個(gè)性化虛擬形象的表情。

第三方面，本發(fā)明實(shí)施例還提供了一種計(jì)算機(jī)設(shè)備，所述計(jì)算機(jī)設(shè)備包括：

一個(gè)或多個(gè)處理器；

存儲(chǔ)器，用于存儲(chǔ)一個(gè)或多個(gè)程序，

當(dāng)所述一個(gè)或多個(gè)程序被所述一個(gè)或多個(gè)處理器執(zhí)行，使得所述一個(gè)或多個(gè)處理器實(shí)現(xiàn)任意實(shí)施例所述的表情重定向方法。

第四方面，本發(fā)明實(shí)施例還提供了一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序，該程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)任意實(shí)施例所述的表情重定向方法。