[發明專利]一種視頻數據處理方法、裝置、設備以及可讀存儲介質

有效

• 申請號: 202010010764.4
• 申請日: 2020-01-06
• 公開（公告）號: CN111182295B
• 公開（公告）日: 2023-08-25
• 發明（設計）人: 高維惜;范湉湉
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: H04N17/00
• 分類號: H04N17/00;G06V10/98;G06T7/00;G06V10/774;G06V10/764
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 熊永強;杜維

1.一種視頻數據處理方法，其特征在于，包括：

獲取視頻的圖像幀內容信息，根據所述圖像幀內容信息在所述視頻中抽取候選代表性圖片；所述圖像幀內容信息包括對象信息與場景信息；

獲取所述視頻的默認代表性圖片；

對所述候選代表性圖片與所述默認代表性圖片分別對應的圖像質量進行評估，得到質量評估結果；所述圖像質量是指基于圖片清晰度信息與圖片美觀度信息的綜合質量，所述質量評估結果是通過將所述候選代表性圖片與所述默認代表性圖片分別對應的清晰度評估分值，以及所述候選代表性圖片與所述默認代表性圖片分別對應的美觀度評估分值進行融合后所確定的；所述候選代表性圖片與所述默認代表性圖片分別對應的清晰度評估分值，是在質量評估模型中通過所述質量評估模型包含的所述圖片清晰度信息所對應的第一模型參數所確定的；所述候選代表性圖片與所述默認代表性圖片分別對應的美觀度評估分值，是在所述質量評估模型中通過所述質量評估模型包含的所述圖片美觀度信息所對應的第二模型參數所確定的；

獲取所述候選代表性圖片與所述默認代表性圖片分別對應的圖片優先級，根據所述圖片優先級與所述質量評估結果，在所述候選代表性圖片與所述默認代表性圖片中，選擇所述視頻的代表性圖片。

2.根據權利要求1所述的方法，其特征在于，所述圖像幀內容信息包括對象信息；

所述根據所述圖像幀內容信息在所述視頻中抽取候選代表性圖片，包括：

獲取所述視頻的視頻幀；

獲取對象集合；

將所述視頻幀中的對象信息與所述對象集合中的默認對象信息進行匹配；

將匹配率大于匹配閾值的視頻幀確定為所述候選代表性圖片。

3.根據權利要求1所述的方法，其特征在于，所述圖像幀內容信息包括場景信息；

所述根據所述圖像幀內容信息在所述視頻中抽取候選代表性圖片，包括：

獲取所述視頻的目標視頻幀；

根據所述目標視頻幀中的場景信息確定所述目標視頻幀對應的第一場景類別；

獲取所述視頻中所述目標視頻幀的上一視頻幀；

根據所述上一視頻幀中的場景信息確定所述上一視頻幀對應的第二場景類別；

若所述第一場景類別與所述第二場景類別不相同，則將所述目標視頻幀和所述上一視頻幀確定為所述候選代表性圖片。

4.根據權利要求1所述的方法，其特征在于，所述對所述候選代表性圖片與所述默認代表性圖片分別對應的圖像質量進行評估，得到質量評估結果，包括：

將所述候選代表性圖片輸入質量評估模型；所述質量評估模型包括清晰度信息對應的第一模型參數和美觀度信息對應的第二模型參數；

根據所述第一模型參數確定所述候選代表性圖片與所述默認代表性圖片分別對應的清晰度評估分值；

根據所述第二模型參數確定所述候選代表性圖片與所述默認代表性圖片分別對應的美觀度評估分數；

融合所述清晰度評估分數與所述美觀度評估分數，生成所述候選代表性圖片與所述默認代表性圖片分別對應的圖像質量分值；

將所述圖像質量分值確定為所述質量評估結果。

5.根據權利要求4所述的方法，其特征在于，所述質量評估模型包括分類層和歸一化層；

所述融合所述清晰度評估分數與所述美觀度評估分數，生成所述候選代表性圖片與所述默認代表性圖片分別對應的圖像質量分值，包括：

融合所述清晰度評估分數與所述美觀度評估分數，通過所述分類層輸出所述候選代表性圖片與所述默認代表性圖片分別對應的原始評估分數；

將所述原始評估分數輸入所述歸一化層，通過所述歸一化層將所述原始評估分數轉換為處于歸一化數值范圍內的數值，將所述歸一化層所輸出的數值確定為所述候選代表性圖片與所述默認代表性圖片分別對應的圖像質量分值。