[發明專利]一種視頻生成方法、裝置及相關設備

有效

• 申請號: 201911320245.1
• 申請日: 2019-12-19
• 公開（公告）號: CN113099146B
• 公開（公告）日: 2022-12-06
• 發明（設計）人: 朱聰超;羅巍;王強;鄧斌
• 申請（專利權）人: 華為技術有限公司
• 主分類號: H04N5/76
• 分類號: H04N5/76;H04N5/232;H04N7/01
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 熊永強;李稷芳

1.一種視頻生成方法，其特征在于，包括：

獲取第一攝像頭在第一時間段內采集的第一視頻數據，所述第一視頻數據包括多幀第一視頻幀，所述多幀第一視頻幀中的每一幀第一視頻幀的分辨率為第一分辨率；

獲取第二攝像頭在所述第一時間段內采集的圖像數據，所述圖像數據包括一張或多張圖像，所述一張或多張圖像中的每一張圖像的分辨率為第二分辨率；

調整所述多幀第一視頻幀中的每一幀第一視頻幀的分辨率，獲得第二視頻數據，所述第二視頻數據包括多幀第二視頻幀，所述多幀第二視頻幀中的每一幀第二視頻幀的分辨率為所述第二分辨率；

基于所述圖像數據，對所述多幀第二視頻幀中的一幀或多幀第二視頻幀進行圖像融合，獲得第三視頻數據，所述第三視頻數據包括多幀第三視頻幀；

在所述基于所述圖像數據，對所述多幀第二視頻幀中的一幀或多幀第二視頻幀進行圖像融合，獲得第三視頻數據之前，包括：

對所述多幀第二視頻幀中的第i幀第二視頻幀和所述一張或多張圖像中的第j張圖像分別進行動態區域檢測，確定所述第i幀第二視頻幀和所述第j張圖像中的動態區域和靜態區域，所述i為大于或等于1的整數，所述j為大于或等于1的整數；

所述基于所述圖像數據，對所述多幀第二視頻幀中的一幀或多幀第二視頻幀進行圖像融合，獲得第三視頻數據，包括：

若所述第j張圖像中的靜態區域的圖像高頻信息大于所述第i幀第二視頻幀中的靜態區域的圖像高頻信息，則將所述第i幀第二視頻幀中的靜態區域的圖像高頻信息用所述第j張圖像中的靜態區域的圖像高頻信息進行替代，獲得所述第三視頻數據，所述第i幀第二視頻幀對應的第三視頻幀中的動態區域的信息為所述第i幀第二視頻幀中的動態區域的信息。

2.根據權利要求1所述的方法，其特征在于，所述第二分辨率大于所述第一分辨率；所述調整所述多幀第一視頻幀中的每一幀第一視頻幀的分辨率，獲得第二視頻數據，包括：

基于預先訓練得到的第一模型，對所述多幀第一視頻幀中的每一幀第一視頻幀進行超分辨率重建，獲得所述第二視頻數據。

3.根據權利要求2所述的方法，其特征在于，所述方法還包括：

獲取訓練樣本，所述訓練樣本包括原始圖像集和目標圖像集；所述原始圖像集包括N張原始圖像，所述N張原始圖像中的每一張原始圖像的分辨率為所述第一分辨率，所述目標圖像集包括N張目標圖像，所述N張目標圖像中的每一張目標圖像的分辨率為所述第二分辨率，所述N張原始圖像與所述N張目標圖像一一對應，所述N為大于或等于1的整數；

以所述N張原始圖像以及所述N張目標圖像作為訓練輸入，以所述N張原始圖像各自對應的目標圖像為N個標簽，訓練得到所述第一模型。

4.根據權利要求2或3所述的方法，其特征在于，所述第一模型為卷積神經網絡模型；所述基于預先訓練得到的第一模型，對所述多幀第一視頻幀中的每一幀第一視頻幀進行超分辨率重建，獲得所述第二視頻數據，包括：

基于所述卷積神經網絡模型，對所述多幀第一視頻幀中的每一幀第一視頻幀進行超分辨率重建，得到與所述每一幀第一視頻幀各自對應的第二視頻幀，所述第二視頻數據包括所述每一幀第一視頻幀各自對應的第二視頻幀。

5.根據權利要求1所述的方法，其特征在于，在所述一張或多張圖像各自對應的采集時刻中，所述第j張圖像對應的采集時刻為與所述第i幀第二視頻幀對應的采集時刻之間的時間差最小的采集時刻。

6.根據權利要求1、2、3或5任意一項所述的方法，其特征在于，所述多幀第一視頻幀中的每一幀第一視頻幀的長寬比與所述一張或多張圖像中的每一張圖像的長寬比一致。