[發(fā)明專利]彈幕顯示方法及裝置

有效

• 申請?zhí)枺?/td>: 202010540299.5
• 申請日: 2020-06-12
• 公開（公告）號: CN111654747B
• 公開（公告）日: 2022-07-26
• 發(fā)明（設(shè)計）人: 王琦
• 申請（專利權(quán)）人: 杭州海康威視數(shù)字技術(shù)股份有限公司
• 主分類號: H04N21/44
• 分類號: H04N21/44;H04N21/431;H04N21/4728;H04N21/488
• 代理公司: 北京蘭亭信通知識產(chǎn)權(quán)代理有限公司 11667
• 代理人: 陳曉瑜

本發(fā)明提供一種彈幕顯示方法，包括：獲取待處理的視頻；依據(jù)視頻中每一幀的圖像特征計算視頻圖像的時域顯著度和空域顯著度；依據(jù)所述時域顯著度和空域顯著度生成二值化掩膜，所述二值化掩膜中包括無遮擋區(qū)域和遮擋區(qū)域；依據(jù)預(yù)設(shè)的彈幕的位置信息，判斷所述彈幕在對應(yīng)二值化掩膜中的無遮擋區(qū)域，將處于無遮擋區(qū)域的彈幕進行隱藏。本發(fā)明彈幕顯示方法與現(xiàn)有的技術(shù)局限于以人為主的固定場景的方法相比，可應(yīng)用于非固定場景，非固定目標(biāo)類型的視頻中，應(yīng)用范圍更廣。

技術(shù)領(lǐng)域

本發(fā)明涉及彈幕顯示技術(shù)領(lǐng)域，尤其涉及一種彈幕顯示方法及裝置。

背景技術(shù)

當(dāng)前的彈幕顯示技術(shù)，需要預(yù)先確定特定的區(qū)域，對特定區(qū)域的彈幕進行遮擋，而該特定區(qū)域以外的彈幕進行顯示。但是，如果視頻圖像中需要聚集注意力的區(qū)域出現(xiàn)在特定區(qū)域之外，則該處理方式失效。基于當(dāng)前的彈幕顯示技術(shù)，難以對多種需要處理的圖像內(nèi)容形成有效的處理。

發(fā)明內(nèi)容

本發(fā)明提供的彈幕顯示方法及裝置，能夠有效的對非固定場景的彈幕進行處理。

第一方面，本發(fā)明提供一種彈幕顯示方法，包括：

獲取待處理的視頻；

依據(jù)視頻中每一幀的圖像特征計算視頻圖像的時域顯著度和空域顯著度；

依據(jù)所述時域顯著度和空域顯著度生成二值化掩膜，所述二值化掩膜中包括無遮擋區(qū)域和遮擋區(qū)域；

依據(jù)預(yù)設(shè)的彈幕的位置信息，判斷所述彈幕在對應(yīng)二值化掩膜中的無遮擋區(qū)域，將處于無遮擋區(qū)域的彈幕進行隱藏。

可選地，所述依據(jù)視頻中每一幀的圖像特征計算視頻圖像的時域顯著度和空域顯著度包括：

依據(jù)亮度、色度和紋理特征計算所述視頻每一幀的空域顯著度；

從待處理視頻中選取間隔預(yù)定幀的兩幀，提取所述兩幀中在后一幀的前景對象相對于在前一幀的前景對象的光流特征；依據(jù)所述光流特征計算光流的單位模值，將所述光流的單位模值作為時域顯著度。

可選地，所述依據(jù)間隔預(yù)定幀的兩幀中在后一幀的前景對象相對于在前一幀的前景對象的光流特征，計算光流的單位模值作為時域顯著度包括：

依據(jù)場景類型將每一幀分割為預(yù)定數(shù)量的待處理區(qū)域，計算兩幀中的同一場景類型的待處理區(qū)域的距離，當(dāng)所述距離在預(yù)定閾值以內(nèi)時，將兩幀劃分為同一場景的幀的集合；

選取同一場景的幀的集合中間隔預(yù)定幀的兩幀，提取在后一幀的前景對象相對于在前一幀的前景對象的光流特征，計算光流的單位模值作為時域顯著度。

可選地，所述依據(jù)所述時域顯著度和空域顯著度生成二值化掩膜包括：

將所述空域顯著度和所述時域顯著度加權(quán)得到顯著度評分；

依據(jù)所述顯著度評分的對同一幀中的各待處理區(qū)域進行排序，選取排序的前若干待處理區(qū)域作為感興趣區(qū)域；

依據(jù)所述感興趣區(qū)域生成二值化掩膜。

可選地，所述選取同一場景的幀的集合中間隔預(yù)定幀的兩幀，提取在后一幀的前景對象相對于在前一幀的前景對象的光流特征包括：

將在前一幀和在后一幀的圖像送入光流提取網(wǎng)絡(luò)，得到在后一幀前景對象相對于在前一幀的前景對象的光流特征。

可選地，所述依據(jù)亮度、色度和紋理特征計算視頻每一幀的空域顯著度包括：

將視頻圖像分割為若干像素塊；

計算當(dāng)前像素塊的亮度的平均值作為第一平均亮度，計算當(dāng)前像素塊周圍的像素塊的亮度平均值作為第二平均亮度；

計算所述第一平均亮度和所述第二平均亮度的差值的平均值作為當(dāng)前像素塊的亮度顯著度；