[發明專利]彈幕顯示方法及裝置

有效

• 申請號: 202010540299.5
• 申請日: 2020-06-12
• 公開（公告）號: CN111654747B
• 公開（公告）日: 2022-07-26
• 發明（設計）人: 王琦
• 申請（專利權）人: 杭州海康威視數字技術股份有限公司
• 主分類號: H04N21/44
• 分類號: H04N21/44;H04N21/431;H04N21/4728;H04N21/488
• 代理公司: 北京蘭亭信通知識產權代理有限公司 11667
• 代理人: 陳曉瑜

1.一種彈幕顯示方法，其特征在于：包括：

獲取待處理的視頻，根據目標檢測和場景分割對每一幀圖像進行畫面劃分，形成前景區塊和背景區塊；

依據視頻中每一幀的圖像特征計算視頻圖像的背景區塊的時域顯著度和前景區塊的空域顯著度；

依據所述背景區塊的時域顯著度和前景區塊的空域顯著度生成二值化掩膜，所述二值化掩膜中包括無遮擋區域和遮擋區域；

依據預設的彈幕的位置信息，判斷所述彈幕在對應二值化掩膜中的無遮擋區域，將處于無遮擋區域的彈幕進行隱藏；

其中，所述依據所述時域顯著度和空域顯著度生成二值化掩膜包括：

將所述空域顯著度和所述時域顯著度加權得到顯著度評分；

依據所述顯著度評分的對同一幀中的各待處理區域進行排序，選取排序的前若干待處理區域作為感興趣區域；

依據所述感興趣區域生成二值化掩膜。

2.如權利要求1所述彈幕顯示方法，其特征在于：所述依據視頻中每一幀的圖像特征計算視頻圖像的時域顯著度和空域顯著度包括：

依據亮度、色度和紋理特征計算所述視頻每一幀的空域顯著度；

從待處理視頻中選取間隔預定幀的兩幀，提取所述兩幀中在后一幀的前景對象相對于在前一幀的前景對象的光流特征；依據所述光流特征計算光流的單位模值，將所述光流的單位模值作為時域顯著度。

3.如權利要求2所述彈幕顯示方法，其特征在于：所述依據間隔預定幀的兩幀中在后一幀的前景對象相對于在前一幀的前景對象的光流特征，計算光流的單位模值作為時域顯著度包括：

依據場景類型將每一幀分割為預定數量的待處理區域，計算兩幀中的同一場景類型的待處理區域的距離，當所述距離在預定閾值以內時，將兩幀劃分為同一場景的幀的集合；

選取同一場景的幀的集合中間隔預定幀的兩幀，提取在后一幀的前景對象相對于在前一幀的前景對象的光流特征，計算光流的單位模值作為時域顯著度。

4.如權利要求3所述彈幕顯示方法，其特征在于：所述選取同一場景的幀的集合中間隔預定幀的兩幀，提取在后一幀的前景對象相對于在前一幀的前景對象的光流特征包括：

將在前一幀和在后一幀的圖像送入光流提取網絡，得到在后一幀前景對象相對于在前一幀的前景對象的光流特征。

5.如權利要求2所述彈幕顯示方法，其特征在于：所述依據亮度、色度和紋理特征計算視頻每一幀的空域顯著度包括：

將視頻圖像分割為若干像素塊；

計算當前像素塊的亮度的平均值作為第一平均亮度，計算當前像素塊周圍的像素塊的亮度平均值作為第二平均亮度；

計算所述第一平均亮度和所述第二平均亮度的差值的平均值作為當前像素塊的亮度顯著度；

計算當前像素塊的色度的平均值作為第一平均色度，計算當前像素塊周圍的像素塊的色度平均值作為第二平均色度；

計算所述第一平均色度和所述第二平均色度的差值的平均值作為當前像素塊的色度顯著度；

計算當前像素塊的紋理特征的平均值作為第一平均紋理特征，計算當前像素塊周圍的像素塊的紋理特征平均值作為第二平均紋理特征；

計算所述第一平均紋理特征和所述第二平均紋理特征的差值的平均值作為當前像素塊的紋理特征顯著度；

對所述亮度顯著度、色度顯著度以及紋理特征顯著度進行加權計算，得到當前像素塊的空域顯著度。