[發(fā)明專利]一種網(wǎng)絡教學視頻的播放方法

有效

• 申請?zhí)枺?/td>: 202010048042.8
• 申請日: 2020-01-16
• 公開（公告）號: CN111225235B
• 公開（公告）日: 2020-12-04
• 發(fā)明（設計）人: 李從容;梅鋒;何宇傳;牛珊珊;賈武俊男;王宇
• 申請（專利權(quán)）人: 北京合眾美華教育投資有限公司
• 主分類號: H04N21/234
• 分類號: H04N21/234;H04N21/233;H04N21/235;H04N21/488;H04N21/81;G09B5/02
• 代理公司: 北京中和立達知識產(chǎn)權(quán)代理事務所(普通合伙) 11756
• 代理人: 張偉樸

1.一種網(wǎng)絡教學視頻播放方法，其特征在于：該網(wǎng)絡教學視頻播放方法包括：

第一步，緩沖視頻，并對緩沖后的視頻預先進行鏡頭分割，具體包括：

首先緩沖至少部分教學視頻，并且在后臺對該緩沖的至少部分視頻進行鏡頭分割，提取關(guān)鍵幀；關(guān)鍵幀分為兩類，包括教師關(guān)鍵幀和課件關(guān)鍵幀；通過人臉識別裝置對連續(xù)播放的視頻中的具有人臉的幀進行識別，挑選出教師幀；將教師幀的每一幅幀圖像與其先后鄰近的幀圖像進行比較，當該幀圖像中灰度和與該幀緊鄰的前一幀相比，灰度變化的比例超過預設的第一閾值時，認定該幀圖像為教師關(guān)鍵幀；

通過文字識別裝置對連續(xù)播放的視頻進行分析，當文字部分的面積超過第二閾值時，認定該幀為課件幀；將課件幀的每一幅幀圖像與其先后鄰近的幀圖像進行比較，當該幀圖像中灰度變化超過預設值的比例超過第三閾值時，認定該幀圖像為課件關(guān)鍵幀；

第二步，對課件關(guān)鍵幀進行文字分析，并進行第一關(guān)鍵詞提取，第一關(guān)鍵詞來自課件關(guān)鍵幀序列中提取的課件關(guān)鍵幀例圖的標題文字；

第三步，對教師幀進行語音分析，并進行第二關(guān)鍵詞提取，

將每一個教師關(guān)鍵幀作為開頭，將該關(guān)鍵幀后續(xù)跟隨后續(xù)幀作為一個教師關(guān)鍵幀段，對該教師關(guān)鍵幀段提取語音，并對該語音進行關(guān)鍵詞的選取；

具體的，每一段語音內(nèi)容經(jīng)識別后，獲得語音組合S(s1，…,sn-1,…,sn)，其中s1～sn是語段；依據(jù)每一個語段在文本中的重復次數(shù)賦予一個權(quán)重，記為p1～pn；語音進一步表示成由語段及其重復權(quán)重對組成，記為S’(s1,p1,s2,p2，……sn，pn)；把語音的n個語段看成是一個n維坐標系，把語段和重復權(quán)重作為坐標，一組(s，p)為n維向量空間中的一個向量；

對n維向量空間進行降維處理，從原始的文本向量特征集合中提取出一部分最為有效的特征的處理過程；降維處理方法具體為；其中i取值為0-n的整數(shù)，超過閾值時將該向量認定為選定向量，未超過閾值時該向量被去除，形成降維；該降維后的語音表示為S”，S”僅包含降維后選定的向量，該降維后選定的向量的語段認定為第二關(guān)鍵詞；

第四步，結(jié)合第一、二關(guān)鍵詞，選定最終關(guān)鍵詞；具體包括：

當相鄰的課件關(guān)鍵幀的第一關(guān)鍵詞和教師關(guān)鍵幀段的第二關(guān)鍵詞相同時，確定課件關(guān)鍵幀的第一關(guān)鍵詞和教師關(guān)鍵幀段的第二關(guān)鍵詞為響應幀區(qū)段中的最終關(guān)鍵詞；

當相鄰的課件關(guān)鍵幀的第一關(guān)鍵詞和教師關(guān)鍵幀段的第二關(guān)鍵詞不同時，計算第一關(guān)鍵詞和第 二關(guān)鍵詞的相似度，即

基于同義詞詞林的結(jié)構(gòu)，判斷需進行相似度計算的兩個詞匯所對應的編碼所在分支，根據(jù)兩個義項的語義距離計算出相似度；其中，d為系數(shù)，由兩個詞匯所對應的編碼所在分支所決定；n為分支層節(jié)點的總個數(shù)；k為分支間的距離；若第一、二關(guān)鍵詞分別為多個，需要一一對應的輪流計算相似度；當相似度高于預設閾值，則合并在相鄰的課件關(guān)鍵幀段和教師關(guān)鍵幀段的關(guān)鍵詞，將第一關(guān)鍵詞確定為最終關(guān)鍵詞；當相似度低于預設閾值，則在課件關(guān)鍵幀段將第一關(guān)鍵詞確定為最終關(guān)鍵詞，并在教師關(guān)鍵幀段將第二關(guān)鍵詞確定為最終關(guān)鍵詞；

第五步，播放教學視頻，并在視頻中進行鏡頭合并；

根據(jù)教學視頻鏡頭分類和關(guān)鍵幀提取的結(jié)果，相鄰的具有相同標題的關(guān)鍵幀對應鏡頭合并作為一個語義教學單元，如果中間穿插有教師鏡頭，向前合并；在合并后的鏡頭中，插入最終關(guān)鍵詞，該最終關(guān)鍵詞插入的位置為屏幕邊緣；并在視頻導航條鏡頭對應的時間軸處插入該關(guān)鍵詞。