[發明專利]視頻處理方法、裝置、電子設備及存儲介質

在審

• 申請號: 202210458541.3
• 申請日: 2022-04-24
• 公開（公告）號: CN114900704A
• 公開（公告）日: 2022-08-12
• 發明（設計）人: 磯部駿;陶鑫;戴宇榮
• 申請（專利權）人: 北京達佳互聯信息技術有限公司
• 主分類號: H04N19/85
• 分類號: H04N19/85;H04N19/136
• 代理公司: 北京三高永信知識產權代理有限責任公司 11138
• 代理人: 李加欣

本公開提供了一種視頻處理方法、裝置、電子設備及存儲介質，屬于多媒體技術領域。方法包括：基于第一視頻片段中多個壓縮視頻幀的質量信息，確定第一傳播路徑和第二傳播路徑；基于所述第一傳播路徑和所述第二傳播路徑，分別對所述多個目標視頻幀和所述多個壓縮視頻幀進行特征提取，得到第一特征和第二特征；基于所述第一特征和所述第二特征，生成第二視頻片段。上述方案，使得通過第一傳播路徑所指示的順序提取第一特征來生成視頻片段時，能夠減少噪聲的影響，并且在此基礎上加上基于第二傳播路徑所指示的順序從多個壓縮視頻幀提取第二特征，能夠充分利用壓縮視頻幀的連續性，消除運動誤差，從而能夠解壓得到高質量的第二視頻片段。

技術領域

本公開涉及多媒體技術領域，特別涉及一種視頻處理方法、裝置、電子設備及存儲介質。

背景技術

隨著視頻的質量越來越高，傳輸高質量的視頻會占用較大的傳輸帶寬。為了降低傳輸帶寬，通常在傳輸前會對視頻進行壓縮，傳輸后再進行解壓縮。如何解壓縮得到高質量的視頻成為業內研究的重點。

相關技術中，通常采用雙向循環網絡重建的方式來對壓縮后的視頻進行解壓縮。通過對壓縮后視頻中的多個視頻幀做正向傳播處理和反向傳播處理，能夠利用歷史累計的視頻幀信息來補充視頻幀的紋理細節，從而使得視頻幀的信息分配均衡，進而重建得到較高質量的視頻。

然而，壓縮后的視頻中不同視頻幀的壓縮程度不同。上述技術方案中，雙向循環網絡采用相同的方式對壓縮程度不同的視頻幀進行處理，使得重建壓縮程度較大的視頻幀的效果差，導致重建后的視頻的質量較低。

發明內容

本公開提供一種視頻處理方法、裝置、電子設備及存儲介質，能夠生成高質量的視頻片段。本公開的技術方案如下：

根據本公開實施例的一方面，提供一種視頻處理方法，包括：

基于第一視頻片段中多個壓縮視頻幀的質量信息，確定第一傳播路徑和第二傳播路徑，所述第一傳播路徑用于指示多個目標視頻幀的順序，所述目標視頻幀為質量滿足質量條件的壓縮視頻幀，所述第二傳播路徑用于指示所述多個壓縮視頻幀的順序；

基于所述第一傳播路徑和所述第二傳播路徑，分別對所述多個目標視頻幀和所述多個壓縮視頻幀進行特征提取，得到第一特征和第二特征，所述第一特征用于表示所述多個目標視頻幀的特征，所述第二特征用于表示所述多個壓縮視頻幀的特征；

基于所述第一特征和所述第二特征，生成第二視頻片段。

根據本公開實施例的另一方面，提供一種視頻處理裝置，包括：

確定單元，被配置為執行基于第一視頻片段中多個壓縮視頻幀的質量信息，確定第一傳播路徑和第二傳播路徑，所述第一傳播路徑用于指示多個目標視頻幀的順序，所述目標視頻幀為質量滿足質量條件的壓縮視頻幀，所述第二傳播路徑用于指示所述多個壓縮視頻幀的順序；

特征提取單元，被配置為執行基于所述第一傳播路徑和所述第二傳播路徑，分別對所述多個目標視頻幀和所述多個壓縮視頻幀進行特征提取，得到第一特征和第二特征，所述第一特征用于表示所述多個目標視頻幀的特征，所述第二特征用于表示所述多個壓縮視頻幀的特征；

生成單元，被配置為執行基于所述第一特征和所述第二特征，生成第二視頻片段。

在一些實施例中，所述特征提取單元，被配置為執行基于所述第一傳播路徑，確定包括所述多個目標視頻幀的目標視頻幀序列；基于所述第二傳播路徑，確定包括所述多個壓縮視頻幀的壓縮視頻幀序列；基于循環卷積神經網絡，分別對所述目標視頻幀序列和所述壓縮視頻幀序列進行特征提取，得到所述第一特征和所述第二特征。

在一些實施例中，所述生成單元，包括：

拼接子單元，被配置為執行在特征維度上對所述第一特征和所述第二特征進行拼接，得到拼接特征，所述拼接特征的特征維度數等于所述第一特征的特征維度數和所述第二特征的特征維度數的和；