[發(fā)明專利]一種視頻會(huì)議質(zhì)量的處理方法及系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 201611261872.9
• 申請(qǐng)日: 2016-12-30
• 公開（公告）號(hào): CN106791579A
• 公開（公告）日: 2017-05-31
• 發(fā)明（設(shè)計(jì)）人: 唐常芳;吳亞鳳
• 申請(qǐng)（專利權(quán)）人: 唐常芳
• 主分類號(hào): H04N7/15
• 分類號(hào): H04N7/15;H04N17/00
• 代理公司: 北京和信華成知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙)11390
• 代理人: 胡劍輝

1.一種視頻會(huì)議質(zhì)量的處理方法，其特征在于：該方法包括以下步驟：

(1)建立人臉數(shù)據(jù)庫、一般性神態(tài)數(shù)據(jù)庫和會(huì)議場(chǎng)景定義數(shù)據(jù)庫；

(2)采集視頻會(huì)議的視頻信號(hào)和音頻信號(hào)；

(3)圖像智能識(shí)別：從視頻信號(hào)中對(duì)與會(huì)者進(jìn)行人臉識(shí)別、表情姿態(tài)分析，得出該與會(huì)者的神情數(shù)據(jù)，并將數(shù)據(jù)存入數(shù)據(jù)庫；對(duì)音頻信號(hào)進(jìn)行分析，并分離出人物發(fā)言和會(huì)場(chǎng)情景聲音，將人物發(fā)言當(dāng)作加權(quán)系數(shù)去修正該與會(huì)者的神情數(shù)據(jù)，在會(huì)議場(chǎng)景定義數(shù)據(jù)庫支撐下對(duì)會(huì)議場(chǎng)景音頻進(jìn)行分析，得出會(huì)議氛圍數(shù)據(jù)，并將該數(shù)據(jù)保存于數(shù)據(jù)庫；

(4)會(huì)議質(zhì)量評(píng)判：根據(jù)會(huì)議和與會(huì)者的得分，進(jìn)行智能計(jì)算，得出會(huì)議和與會(huì)者的最終評(píng)分，并給出會(huì)議評(píng)價(jià)和改進(jìn)報(bào)告。

2.根據(jù)權(quán)利要求1所述的視頻會(huì)議質(zhì)量的處理方法，其特征在于：該方法還包括步驟(5)，由會(huì)議管理者對(duì)會(huì)議質(zhì)量報(bào)告進(jìn)行反饋，根據(jù)管理者的反饋信息修正特定人物神態(tài)知識(shí)庫，對(duì)一般性神態(tài)數(shù)據(jù)庫和會(huì)議場(chǎng)景定義數(shù)據(jù)庫進(jìn)行升級(jí)。

3.根據(jù)權(quán)利要求2所述的視頻會(huì)議質(zhì)量的處理方法，其特征在于：所述步驟(3)中，人臉識(shí)別包括以下步驟：

(i)人臉識(shí)別和定位：對(duì)視頻信號(hào)進(jìn)行逐幀分析，判斷是否有人臉存在，如果有則將人臉區(qū)域數(shù)據(jù)裁剪出來，對(duì)于相鄰幀的數(shù)據(jù)做對(duì)比，獲得人臉相似度最好的一幀當(dāng)作所選擇的人臉圖片；

(ii)人臉規(guī)格化：將大小尺寸不同的圖片規(guī)格化為統(tǒng)一的大小，并且將圖片做灰度化處理；

(iii)人臉特征提取：將人臉圖片進(jìn)行特征化處理，得到人臉數(shù)據(jù)的特征空間向量；

(iv)比較和識(shí)別：將人臉特征數(shù)據(jù)與步驟(1)的人臉數(shù)據(jù)庫進(jìn)行比對(duì)，識(shí)別出具體的人物。

4.根據(jù)權(quán)利要求3所述的視頻會(huì)議質(zhì)量的處理方法，其特征在于：所述步驟(3)中，表情姿態(tài)分析包括：分析與會(huì)者的表情姿態(tài)，與一般性神態(tài)數(shù)據(jù)庫進(jìn)行對(duì)比來做出表情神態(tài)分類識(shí)別，在特定人物表情知識(shí)庫中進(jìn)行精確匹配，得出表情姿態(tài)數(shù)據(jù)，并將數(shù)據(jù)歸類和存儲(chǔ)。

5.根據(jù)權(quán)利要求4所述的視頻會(huì)議質(zhì)量的處理方法，其特征在于：所述步驟(3)中，音頻信號(hào)的處理包括以下步驟：

(a)對(duì)語音類別進(jìn)行識(shí)別，如果是單人發(fā)言則執(zhí)行步驟(b)，如果是非單人發(fā)言則執(zhí)行步驟(e)；

(b)進(jìn)行語音聲紋分析與人物匹配；

(c)進(jìn)行語言語氣語調(diào)分析；

(d)計(jì)算發(fā)言人參會(huì)質(zhì)量，跳轉(zhuǎn)到步驟(h)；

(e)對(duì)背景音進(jìn)行分類；

(f)按照背景音分類進(jìn)行會(huì)議場(chǎng)景識(shí)別；

(g)計(jì)算會(huì)議氛圍得分；

(h)結(jié)束。