[發(fā)明專利]一種多媒體信息的處理方法、計(jì)算設(shè)備及存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202011219009.3
• 申請(qǐng)日: 2020-11-04
• 公開（公告）號(hào): CN114449297A
• 公開（公告）日: 2022-05-06
• 發(fā)明（設(shè)計(jì)）人: 褚曉璐
• 申請(qǐng)（專利權(quán)）人: 阿里巴巴集團(tuán)控股有限公司
• 主分類號(hào): H04N21/2187
• 分類號(hào): H04N21/2187;H04N7/15;H04N21/234;H04N21/233;H04N21/431;G10L25/57;G10L25/63;H04N21/475
• 代理公司: 北京太合九思知識(shí)產(chǎn)權(quán)代理有限公司 11610
• 代理人: 張愛;劉戈

1.一種多媒體信息的處理方法，其特征在于，包括：

獲取多媒體信息，確定表示所述多媒體信息中用戶情緒的情緒信息；

根據(jù)所述情緒信息，確定多媒體信息的對(duì)應(yīng)處理方式，所述處理方式用于反映所述情緒信息；

基于所述處理方式，對(duì)所述多媒體信息進(jìn)行處理。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述獲取多媒體信息，包括：

基于音頻和/或視頻會(huì)議，獲取至少一個(gè)參與用戶的音頻和/或視頻信息；

基于音頻和/或視頻直播，獲取主播的音頻和/或視頻信息；或，

基于預(yù)置音頻和/或預(yù)置視頻，獲取預(yù)置音頻和/或預(yù)置視頻的視頻信息。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述確定表示所述多媒體信息中用戶情緒的情緒信息，包括：

根據(jù)至少一幀視頻圖像，確定用戶的語音信息和/或表情信息；

根據(jù)所述語音信息和/或表情信息，確定所述情緒信息。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述根據(jù)所述語音信息確定所述情緒信息，包括：

確定所述語音信息對(duì)應(yīng)的語義；

根據(jù)所述語義來確定所述情緒信息。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述根據(jù)所述語義來確定所述情緒信息，包括：

根據(jù)所述語義，確定所述語音信息的可表示出情緒傾向的標(biāo)簽集合；

根據(jù)所述語義，從所述標(biāo)簽集合中選擇對(duì)應(yīng)的情緒標(biāo)簽，作為情緒信息。

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述情緒信息，確定多媒體信息的對(duì)應(yīng)處理方式，包括：

根據(jù)所述情緒信息，選擇與該情緒信息對(duì)應(yīng)的特效處理方式。

7.根據(jù)權(quán)利要求6所述的方法，其特征在于，所述方法還包括：

確定所述情緒信息所面向的目標(biāo)對(duì)象；

根據(jù)所述目標(biāo)對(duì)象，選擇與該情緒信息對(duì)應(yīng)的特效處理方式。

8.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述基于所述處理方式，對(duì)所述多媒體信息進(jìn)行處理，包括：

確定所述處理方式面向的目標(biāo)對(duì)象；

基于所述處理方式，對(duì)所述目標(biāo)對(duì)象的視頻圖像進(jìn)行處理。

9.根據(jù)權(quán)利要求8所述的方法，其特征在于，所述方法還包括：

確定所述視頻圖像中的目標(biāo)對(duì)象；

基于所述處理方式，對(duì)所述目標(biāo)對(duì)象進(jìn)行處理。

10.根據(jù)權(quán)利要求9所述的方法，其特征在于，當(dāng)所述目標(biāo)對(duì)象不存在于所述視頻圖像中的情況下，所述方法還包括：

在所述視頻圖像中確定所述目標(biāo)對(duì)象可出現(xiàn)的位置；

基于所述處理方式，對(duì)所述位置進(jìn)行處理。

11.根據(jù)權(quán)利要求7所述的方法，其特征在于，所述確定所述情緒信息所面向的目標(biāo)對(duì)象，包括：

根據(jù)所述語音信息確定對(duì)應(yīng)的語義；

根據(jù)所述語義獲取其中的目標(biāo)對(duì)象標(biāo)識(shí)，基于所述目標(biāo)對(duì)象標(biāo)識(shí)，來確定所述目標(biāo)對(duì)象。

12.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

將處理后的多媒體信息提供給對(duì)應(yīng)智能終端，以進(jìn)行展示。

13.根據(jù)權(quán)利要求6所述的方法，其特征在于，所述特效處理方式包括：表情特效、文字特效以及動(dòng)畫特效。

14.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述方法還包括：

根據(jù)情緒信息、語音信息、和/或場景，確定預(yù)置視頻不符合預(yù)置條件，則提供提示信息，以提示需要處理的預(yù)置視頻中的視頻片段、語音信息和/或人物。

15.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述多媒體信息包括音頻和/或視頻信息。