[發明專利]自適應時域變分辨率編解碼方法、裝置、終端及存儲介質

在審

• 申請號: 202310072078.3
• 申請日: 2023-01-12
• 公開（公告）號: CN116156173A
• 公開（公告）日: 2023-05-23
• 發明（設計）人: 常崢;林宇翔;王苫社;馬思偉
• 申請（專利權）人: 鵬城實驗室
• 主分類號: H04N19/132
• 分類號: H04N19/132;H04N19/102;H04N19/136;H04N19/169;H04N19/42;H04N19/593
• 代理公司: 深圳市君勝知識產權代理事務所(普通合伙) 44268
• 代理人: 劉文求

本發明公開了自適應時域變分辨率編解碼方法、裝置、終端及存儲介質，方法包括：將輸入視頻分為若干等長的子序列；獲取各子序列的場景運動特征，根據場景運動特征確定若干目標子序列；對各目標子序列進行下采樣，得到若干降幀率序列；對各降幀率序列進行編解碼，得到若干解碼序列；對各解碼序列進行上采樣，得到各目標子序列的編解碼序列。本發明通過場景運動特征篩選出目標子序列，對目標子序列進行下采樣后再進行編解碼，然后在解碼端對降幀率的解碼序列進行上采樣，從而自適應地對時域中特定區域進行幀率調整，節省了編碼碼率。解決了現有技術中由于視頻序列中某些時域區域的場景運動平緩，因此采用固定幀率進行編解碼會浪費編碼碼率的問題。

技術領域

本發明涉及視頻編解碼領域，尤其涉及的是自適應時域變分辨率編解碼方法、裝置、終端及存儲介質。

背景技術

現有的AVS3編解碼框架只接收固定幀率的視頻作為輸入序列。對于一些序列的某些時域區域，場景的運動可能會比較平緩，因此這一時段的時域冗余非常大，采用固定幀率對其進行編解碼會浪費較多的編碼碼率。

因此，現有技術還有待改進和發展。

發明內容

本發明要解決的技術問題在于，針對現有技術的上述缺陷，提供一種自適應時域變分辨率編解碼方法、裝置、終端及存儲介質，旨在解決現有技術中由于視頻序列中某些時域區域的場景運動平緩，因此采用固定幀率對視頻序列進行編解碼會浪費較多的編碼碼率的問題。

本發明解決問題所采用的技術方案如下：

第一方面，本發明實施例提供一種自適應時域變分辨率編解碼方法，其中，所述方法包括：

獲取輸入視頻，將所述輸入視頻分為若干等長的子序列；

獲取各所述子序列分別對應的場景運動特征，根據所述場景運動特征從各所述子序列中確定若干目標子序列；

對各所述目標子序列在時域上進行下采樣操作，得到各所述目標子序列分別對應的降幀率序列；

對各所述目標子序列的降幀率序列進行編解碼操作，得到各所述目標子序列分別對應的解碼序列；

對各所述解碼序列在時域上進行上采樣操作，得到各所述目標子序列分別對應的編解碼序列。

在一種實施方式中，每一所述子序列的長度與時域基本單元的長度相等，所述時域基本單元的長度為2s。

在一種實施方式中，所述下采樣操作為幀率兩倍下采樣。

在一種實施方式中，所述獲取各所述子序列分別對應的場景運動特征，根據所述場景運動特征從各所述子序列中確定若干目標子序列，包括：

對每一所述子序列進行所述下采樣操作，得到該子序列對應的降幀率序列；

通過幀復制操作對該子序列的降幀率序列進行幀率恢復，得到該子序列的恢復序列；

獲取該子序列和該子序列的恢復序列的相似度和預設的相似閾值，當所述相似度值高于所述相似閾值時，判斷所述場景運動特征為運動平緩；

將所述場景運動特征為運動平緩的所述子序列作為所述目標子序列。

在一種實施方式中，所述上采樣操作為在每一所述解碼序列的相鄰兩個視頻幀之間生成內插幀，所述內插幀的生成方法包括：

獲取第一視頻幀和第二視頻幀分別對應的時空域信息；

根據兩個所述時空域信息進行正向和反向的預測操作，得到兩次所述預測操作分別對應的內插參考幀，其中，正向的預測起點為所述第一視頻幀，預測終點為所述第二視頻幀；反向的所述預測起點為所述第二視頻幀，所述預測終點為所述第一視頻幀；