[發明專利]視頻處理方法、裝置、計算機設備及介質

在審

• 申請號: 202210458499.5
• 申請日: 2022-04-24
• 公開（公告）號: CN114897688A
• 公開（公告）日: 2022-08-12
• 發明（設計）人: 磯部駿;陶鑫;戴宇榮
• 申請（專利權）人: 北京達佳互聯信息技術有限公司
• 主分類號: G06T3/40
• 分類號: G06T3/40;G06T5/50;G06T7/223;G06T7/254;G06T7/269
• 代理公司: 北京三高永信知識產權代理有限責任公司 11138
• 代理人: 李加欣

1.一種視頻處理方法，其特征在于，所述方法包括：

獲取樣本視頻中圖像對的運動信息，所述圖像對包括所述樣本視頻中相鄰的一對圖像，所述運動信息表示所述圖像對的兩幀圖像之間的像素運動情況；

從所述圖像對中，獲取運動信息滿足運動條件的樣本圖像塊對，所述樣本圖像塊對中的兩個樣本圖像塊分別位于所述圖像對的兩幀圖像；

基于所述樣本視頻中的多對所述樣本圖像塊對，進行模型訓練，得到超分辨模型，所述超分辨模型用于對視頻進行超分辨重建。

2.根據權利要求1所述的視頻處理方法，其特征在于，所述獲取樣本視頻中圖像對的運動信息包括下述任一項：

獲取所述樣本視頻中圖像對的光流信息，所述光流信息表示所述圖像對中前一幀圖像的像素移動至后一幀圖像的移動量；或，

獲取所述樣本視頻中圖像對的時序差分信息，所述時序差分信息表示所述圖像對的兩幀圖像在時序上的運動變化。

3.根據權利要求1所述的視頻處理方法，其特征在于，所述運動信息包括運動參數，所述運動參數表示所述圖像對的兩幀圖像之間的像素運動程度；

所述從所述圖像對中，獲取運動信息滿足運動條件的樣本圖像塊對包括：

從所述圖像對中，獲取運動參數大于或等于第一閾值的運動圖像塊對以及運動參數小于第二閾值的靜止圖像塊對，所述第一閾值大于或等于所述第二閾值。

4.根據權利要求3所述的視頻處理方法，其特征在于，所述從所述圖像對中，獲取運動參數大于或等于第一閾值的運動圖像塊對以及運動參數小于第二閾值的靜止圖像塊對包括：

從所述圖像對中，確定所述運動參數大于或等于所述第一閾值的第一像素，以所述第一像素為起點截取目標尺寸的圖像塊對，得到所述運動圖像塊對；

確定所述運動參數小于所述第二閾值的第二像素，以所述第二像素為起點截取目標尺寸的圖像塊對，得到所述靜止圖像塊對。

5.根據權利要求3或4所述的視頻處理方法，其特征在于，所述第一閾值與所述第二閾值基于所述圖像對中的任一幀圖像所包括的多個像素的運動參數確定。

6.根據權利要求3或4所述的視頻處理方法，其特征在于，所述運動圖像塊對的數量與所述靜止圖像塊對的數量相同。

7.根據權利要求1所述的視頻處理方法，其特征在于，所述樣本視頻包括第一分辨率的樣本視頻與第二分辨率的樣本視頻，所述第一分辨率小于所述第二分辨率；

所述從所述圖像對中，獲取運動信息滿足運動條件的樣本圖像塊對包括：

從所述第一分辨率的樣本視頻的圖像對中，獲取所述運動信息滿足所述運動條件的第一樣本圖像塊對，從所述第二分辨率的樣本視頻的圖像對中，獲取所述運動信息滿足所述運動條件的第二樣本圖像塊對，所述第一樣本圖像塊對為所述第一分辨率的樣本圖像塊對，所述第二樣本圖像塊對為所述第二分辨率的樣本圖像塊對；

所述基于所述樣本視頻中的多對所述樣本圖像塊對，進行模型訓練，得到超分辨模型包括：

基于所述第一分辨率的樣本視頻中的多對所述第一樣本圖像塊對以及所述第二分辨率的樣本視頻中的多對所述第二樣本圖像塊對，進行模型訓練，得到所述超分辨模型。