[發明專利]彈幕表情包的生成方法、電子設備和可讀存儲介質

在審

• 申請號: 201910802153.0
• 申請日: 2019-08-28
• 公開（公告）號: CN110719525A
• 公開（公告）日: 2020-01-21
• 發明（設計）人: 馬丹;張進;莫東松;張健;鐘宜峰;馬曉琳;趙璐;王科
• 申請（專利權）人: 咪咕文化科技有限公司;中國移動通信集團有限公司
• 主分類號: H04N21/44
• 分類號: H04N21/44;H04N21/435;H04N21/4788;H04N21/488
• 代理公司: 31260 上海晨皓知識產權代理事務所(普通合伙)
• 代理人: 成麗杰

1.一種彈幕表情包生成方法，其特征在于，包括：

接收輸入信息；

提取視頻中的各視頻幀；

將所述輸入信息與各所述視頻幀進行匹配，并根據匹配的結果確定目標視頻幀；

根據所述目標視頻幀和所述輸入信息生成彈幕表情包。

2.根據權利要求1所述的彈幕表情包生成方法，其特征在于，所述將所述輸入信息與各所述視頻幀進行匹配，包括：

獲取所述輸入信息的情感類型；

獲取各所述視頻幀的情感類型；

將所述輸入信息的情感類型與各所述視頻幀的情感類型進行匹配。

3.根據權利要求2所述的彈幕表情包生成方法，其特征在于，所述將所述輸入信息的情感類型與各所述視頻幀的情感類型進行匹配，包括：

根據所述輸入信息的情感類型，獲取所述輸入信息的情感分數；

根據各所述視頻幀的情感類型，獲取各所述視頻幀的情感分數；

獲取所述輸入信息的情感分數與各所述視頻幀的情感分數的分數差，并將所述分數差作為所述匹配的結果。

4.根據權利要求3所述的彈幕表情包生成方法，其特征在于，所述獲取各所述視頻幀的情感類型，具體為：

獲取各所述視頻幀針對預設的各情感因子的情感類型；

所述根據各所述視頻幀的情感類型，獲取各所述視頻幀的情感分數，包括：

獲取各所述視頻幀的不同情感類型分別對應的類型分數；

根據各所述視頻幀的不同情感類型分別對應的類型分數，獲取各所述視頻幀的情感分數。

5.根據權利要求4所述的彈幕表情包生成方法，其特征在于，所述預設的情感因子包括以下任意組合：人臉、表情、動作。

6.根據權利要求4所述的彈幕表情包生成方法，其特征在于，所述預設的情感因子包括人臉、表情和動作；

所述獲取各所述視頻幀針對預設的各情感因子的情感類型，具體為：

根據預先訓練的分類模型，獲取各所述視頻幀針對各情感因子的情感類型；其中，所述分類模型的模型參數的參數值基于以下損失函數訓練得到：

其中，所述L為訓練的所述分類模型的模型參數的參數值，所述w為所述模型參數，所述L_{entro_face}(w)為基于人臉訓練數據集的交叉熵損失函數，所述L_{entro_emotion}(w)為基于表情訓練數據集的交叉熵損失函數，所述L_{entro_motion}為的基于動作訓練數據集的交叉熵損失函數，所述λΩ(w)為正則化項，所述α，β，χ為預設權值。

7.根據權利要求2所述的彈幕表情包生成方法，其特征在于，所述輸入信息包括文本信息，所述獲取所述輸入信息的情感類型，包括：

對所述文本信息進行分詞，得到N個詞；其中，所述N為大于1的自然數；

分別獲取所述N個詞的情感類型；

分別對所述N個詞的情感類型對應的情感分數增加第一分數；

將最高的情感分數對應的情感類型確定為所述輸入信息的情感類型。

8.根據權利要求7所述的彈幕表情包生成方法，其特征在于，在所述分別對所述N個詞的情感類型對應的情感分數增加第一分數后，還包括：

若檢測到所述N個詞中的第i個詞滿足預設條件，則對所述第i個詞的情感類型對應的情感分數再增加第二分數；其中，所述預設條件包括以下任意之一或其組合：

所述第i個詞的前一個詞為預設的表征情感程度的詞、所述第i個詞的后一個詞為預設的表征情感程度的詞、所述第i個詞后的標點為預設的表征情感程度的標點；

若檢測到所述第i個詞的前一個詞為預設的否定詞，則對所述第i個詞的情感類型對應的情感分數減去第三分數。