[發明專利]視頻處理方法和裝置、電子設備、計算機可讀存儲介質

有效

• 申請號: 201810585928.9
• 申請日: 2018-06-08
• 公開（公告）號: CN108777815B
• 公開（公告）日: 2021-04-23
• 發明（設計）人: 陳巖
• 申請（專利權）人: OPPO廣東移動通信有限公司
• 主分類號: H04N21/44
• 分類號: H04N21/44
• 代理公司: 廣州華進聯合專利商標代理有限公司 44224
• 代理人: 方高明

1.一種視頻處理方法，其特征在于，包括：

從視頻中每間隔預設幀提取一幀圖像，采用訓練完成的神經網絡提取圖像的特征，對提取的特征進行圖像場景識別，輸出所述圖像的背景圖像所屬各個指定場景類別的置信度，選取置信度最高且超過置信度閾值的圖像場景作為所述圖像的背景圖像所屬的分類標簽；對提取的特征進行前景目標檢測，輸出前景目標所屬指定目標類別的置信度，輸出所述前景目標的各個目標標簽，將所述分類標簽和目標標簽作為所述圖像的場景標簽，并獲取所述場景標簽對應的置信度；

獲取所述視頻拍攝時的位置信息；根據所述位置信息調整所述圖像中場景標簽對應的置信度；

將所述圖像的場景標簽對應的置信度作為所述圖像中場景標簽的權重值；根據所述圖像的場景標簽及對應的權重值建立標簽頻率直方圖；或者根據所述圖像的場景標簽的置信度在所述圖像的所有場景標簽的置信度的大小確定所述場景標簽的權重值；根據所述圖像的場景標簽及對應的權重值建立標簽頻率直方圖；或者根據所述場景標簽對應的位置區域的大小確定所述圖像中場景標簽的權重值，將所述視頻中包含所述場景標簽的圖像對應的權重值進行加權和或加權平均值作為所述場景標簽的頻率，以所述場景標簽作為橫坐標，所述場景標簽的頻率作為縱坐標建立標簽頻率直方圖；所述圖像的場景標簽的權重值是指所述圖像的場景標簽在視頻標簽中的重要程度；

根據所述標簽頻率直方圖確定所述視頻的視頻標簽。

2.根據權利要求1所述的方法，其特征在于，所述方法還包括：

所述圖像的場景標簽的置信度在所述圖像的所有場景標簽的置信度最大時，所述場景標簽對應的權重值在所述圖像中的權重值最高。

3.根據權利要求1至2任一項所述的方法，其特征在于，所述方法還包括：

根據置信度大于閾值的場景標簽及對應的置信度建立所述視頻的標簽頻率直方圖。

4.根據權利要求1所述的方法，其特征在于，所述方法還包括：

根據所述標簽頻率直方圖得到所述場景標簽對應的頻率；

將頻率大的預設個數個場景標簽作為所述視頻的視頻標簽。

5.一種視頻處理裝置，其特征在于，包括：

場景識別模塊，用于從視頻中每間隔預設幀提取一幀圖像，采用訓練完成的神經網絡提取圖像的特征，對提取的特征進行圖像場景識別，輸出所述圖像的背景圖像所屬各個指定場景類別的置信度，選取置信度最高且超過置信度閾值的圖像場景作為所述圖像的背景圖像所屬的分類標簽；對提取的特征進行前景目標檢測，輸出前景目標所屬指定目標類別的置信度，輸出所述前景目標的各個目標標簽，將所述分類標簽和目標標簽作為所述圖像的場景標簽，并獲取所述場景標簽對應的置信度；

置信度調整模塊，用于獲取所述視頻拍攝時的位置信息；根據所述位置信息調整所述圖像中場景標簽對應的置信度；

直方圖建立模塊，用于將所述圖像的場景標簽對應的置信度作為所述圖像中場景標簽的權重值；根據所述圖像的場景標簽及對應的權重值建立標簽頻率直方圖；或者根據所述圖像的場景標簽的置信度在所述圖像的所有場景標簽的置信度的大小確定所述場景標簽的權重值；根據所述圖像的場景標簽及對應的權重值建立標簽頻率直方圖；或者根據所述場景標簽對應的位置區域的大小確定所述圖像中場景標簽的權重值，將所述視頻中包含所述場景標簽的圖像對應的權重值進行加權和或加權平均值作為所述場景標簽的頻率，以所述場景標簽作為橫坐標，所述場景標簽的頻率作為縱坐標建立標簽頻率直方圖；所述圖像的場景標簽的權重值是指所述圖像的場景標簽在視頻標簽中的重要程度；

視頻標簽確定模塊，用于根據所述標簽頻率直方圖確定所述視頻的視頻標簽。

6.一種電子設備，包括存儲器及處理器，所述存儲器中儲存有計算機程序，所述計算機程序被所述處理器執行時，使得所述處理器執行如權利要求1至4中任一項所述的視頻處理方法的步驟。

7.一種計算機可讀存儲介質，其上存儲有計算機程序，其特征在于，所述計算機程序被處理器執行時實現如權利要求1至4中任一項所述的方法的步驟。