[發(fā)明專利]基于視頻的目標(biāo)表情生成方法、裝置、介質(zhì)、電子設(shè)備

在審

• 申請(qǐng)?zhí)枺?/td>: 202010032947.6
• 申請(qǐng)日: 2020-01-13
• 公開（公告）號(hào): CN111274447A
• 公開（公告）日: 2020-06-12
• 發(fā)明（設(shè)計(jì)）人: 鄭如剛
• 申請(qǐng)（專利權(quán)）人: 深圳壹賬通智能科技有限公司
• 主分類號(hào): G06F16/783
• 分類號(hào): G06F16/783;G06K9/00;G06T5/50;G06T7/11;G06T11/00
• 代理公司: 深圳市隆天聯(lián)鼎知識(shí)產(chǎn)權(quán)代理有限公司 44232
• 代理人: 甄偉軍

1.一種基于視頻的目標(biāo)表情生成方法，其特征在于，包括：

響應(yīng)于用戶觸發(fā)的目標(biāo)表情制作指令，閱讀視頻；

識(shí)別所述視頻中的人臉圖像，以獲取具有人臉圖像的清晰的目標(biāo)圖片；

對(duì)所述目標(biāo)圖片中人臉圖像的表情進(jìn)行實(shí)時(shí)分析，以獲得所述目標(biāo)圖片中人臉圖像表情的表情指數(shù)；

根據(jù)所有目標(biāo)圖片中人臉圖像表情的表情指數(shù)，生成目標(biāo)表情。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述識(shí)別視頻中的人臉圖像，以獲取具有人臉圖像的清晰的目標(biāo)圖片，包括：

確定所述視頻中每一幀具有人臉圖像的圖片的可識(shí)別度；

判斷所述具有人臉圖像的圖片的可識(shí)別度是否大于預(yù)定閾值；

如果大于預(yù)定閾值，則獲取所述圖片，以作為目標(biāo)圖片；

如果不大于預(yù)定閾值，則過濾所述圖片。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對(duì)目標(biāo)圖片中人臉圖像的表情進(jìn)行實(shí)時(shí)分析，以獲得所述目標(biāo)圖片中人臉圖像表情的表情指數(shù)，包括：

基于所述目標(biāo)圖片，分別按照各基本表情類型對(duì)應(yīng)的表情評(píng)價(jià)模型對(duì)所述目標(biāo)圖片中人臉圖像的表情進(jìn)行評(píng)價(jià)；

基于所述各表情評(píng)價(jià)模型的評(píng)價(jià)，輸出所述目標(biāo)圖片中人臉圖像表情在各表情類型評(píng)價(jià)上的表情值，將所述各表情值作為目標(biāo)圖片中人臉圖像表情的表情指數(shù)。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述根據(jù)所有目標(biāo)圖片中人臉圖像表情的表情指數(shù)，生成目標(biāo)表情，包括：

根據(jù)所述目標(biāo)圖片中人臉圖像表情在各表情類型評(píng)價(jià)上的表情值，按照預(yù)設(shè)規(guī)則在所有目標(biāo)圖片中確定N幀目標(biāo)圖片，其中N為正整數(shù)；

將所述確定的N幀目標(biāo)圖片進(jìn)行合成，以生成目標(biāo)表情。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述根據(jù)目標(biāo)圖片中人臉圖像表情在各表情類型評(píng)價(jià)上的表情值，按照預(yù)設(shè)規(guī)則在所有目標(biāo)圖片中確定N幀目標(biāo)圖片，包括：

分別確定每一幀目標(biāo)圖片中人臉圖像表情在各表情類型評(píng)價(jià)上的表情值中的最大表情值，以分別將所述最大表情值對(duì)應(yīng)的表情類型作為對(duì)應(yīng)目標(biāo)圖片中人臉圖像表情的主表情類型；

根據(jù)人臉圖像表情的主表情類型，對(duì)所有目標(biāo)圖片進(jìn)行分類；

基于目標(biāo)圖片對(duì)應(yīng)的最大表情值，分別對(duì)每一類目標(biāo)圖片按照降序的順序進(jìn)行排序；

將任意一類目標(biāo)圖片中最大表情值排名前N的目標(biāo)圖片作為確定的目標(biāo)圖片。

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所有目標(biāo)圖片中人臉圖像表情的表情指數(shù)，生成目標(biāo)表情，包括：

響應(yīng)于用戶依據(jù)所有目標(biāo)圖片中人臉圖像表情的表情指數(shù)而觸發(fā)的選擇指令，在所有目標(biāo)圖片中選定N幀圖片，其中N為正整數(shù)；

將所述選定的N幀含有人臉圖像表情的圖片進(jìn)行合成，以生成目標(biāo)表情。

7.根據(jù)權(quán)利要求1所述的方法，其特征在于，在所述根據(jù)所有目標(biāo)圖片中人臉圖像表情的表情指數(shù)，生成目標(biāo)表情之后，所述方法還包括：

響應(yīng)于用戶的選擇指令，在預(yù)先創(chuàng)建的聲音數(shù)據(jù)庫中選定相應(yīng)的音效；

將所述選定的音效嵌入所述目標(biāo)表情中，以生成具有音效的目標(biāo)表情。

8.一種基于視頻的目標(biāo)表情生成裝置，其特征在于，包括：

閱讀模塊，用于響應(yīng)于用戶觸發(fā)的目標(biāo)表情制作指令，閱讀視頻；

識(shí)別模塊，用于識(shí)別所述視頻中的人臉圖像，以獲取具有人臉圖像的清晰的目標(biāo)圖片；

分析模塊，用于對(duì)所述獲取到的目標(biāo)圖片中人臉圖像的表情進(jìn)行實(shí)時(shí)分析，以獲得所述目標(biāo)圖片中人臉圖像表情的表情指數(shù)；

生成模塊，用于根據(jù)所有目標(biāo)圖片中人臉圖像表情的表情指數(shù)，生成目標(biāo)表情。

9.一種計(jì)算機(jī)可讀程序介質(zhì)，其特征在于，其存儲(chǔ)有計(jì)算機(jī)程序指令，當(dāng)所述計(jì)算機(jī)程序指令被計(jì)算機(jī)執(zhí)行時(shí)，使計(jì)算機(jī)執(zhí)行根據(jù)權(quán)利要求1至7中任一項(xiàng)所述的方法。

10.一種基于視頻的目標(biāo)表情生成的電子設(shè)備，其特征在于，所述電子設(shè)備包括：

處理器；

存儲(chǔ)器，所述存儲(chǔ)器上存儲(chǔ)有計(jì)算機(jī)可讀指令，所述計(jì)算機(jī)可讀指令被所述處理器執(zhí)行時(shí)，實(shí)現(xiàn)如權(quán)利要求1至7任一項(xiàng)所述的方法。