[發明專利]基于丟失塊修復的分布式多視點視頻解碼的方法和裝置

有效

• 申請號: 202010187089.2
• 申請日: 2020-03-17
• 公開（公告）號: CN111372081B
• 公開（公告）日: 2022-06-17
• 發明（設計）人: 楊紅;卿粼波;何小海
• 申請（專利權）人: 四川大學
• 主分類號: H04N19/159
• 分類號: H04N19/159;H04N19/30;H04N19/44;H04N19/895;H04N19/172
• 代理公司: 北京潤澤恒知識產權代理有限公司 11319
• 代理人: 莎日娜

本發明一種基于丟失塊修復的分布式多視點視頻解碼的方法和裝置，本發明涉及視頻解碼領域，所述方法包括：針對接收到的關鍵幀碼流進行幀內解碼并判斷是否出現丟失，在出現丟失的情況下，根據視點內差錯隱藏算法和視點間差錯隱藏算法分別修復丟失的關鍵幀得到第一修復關鍵幀、第二修復關鍵幀；采用融合算法，計算得到時域邊信息的質量；計算得到空域邊信息的質量；在時域邊信息的質量高于空域邊信息的質量的情況下，以第一修復關鍵幀作為解碼結果；在時域邊信息的質量低于空域邊信息的質量的情況下，以第二修復關鍵幀作為解碼結果。本發明很好地解決了DMVC系統關鍵幀在無線網絡中傳輸時出現的丟失問題，且具有保持關鍵幀壓縮性的優勢。

技術領域

本發明涉及視頻解碼領域，特別是一種基于丟失塊修復的分布式多視點視頻解碼的方法和裝置。

背景技術

分布式多視點視頻編碼(Distributed Multi-view Video Coding，DMVC)為無線環境下密集低功耗終端的多視點視頻編解碼帶來了新的曙光，其采用獨立編碼-聯合解碼的方式，具有編碼復雜度低、誤碼魯棒性高等特點。然而，編碼后數據量大、無線帶寬有限且波動大、無線信道傳輸誤碼率高等問題對DMVC數據的無線傳輸帶來了新的挑戰，使得開展針對DMVC視頻數據無線傳輸技術的研究有著十分重要的學術價值和現實意義。

DMVC系統是獨立編碼-聯合解碼，視頻數據中的關鍵幀的正確解碼有助于生成高質量的邊信息，而邊信息直接關系到整個DMVC系統的數據壓縮率以及視頻的恢復效果。因此，在易丟失無線網絡環境下，出現關鍵幀丟失如何修復，從而得到質量穩定、可靠的關鍵幀是DMVC系統中的一個亟待解決的問題。

發明內容

鑒于上述問題，本發明提供一種基于丟失塊修復的分布式多視點視頻解碼的方法和裝置，解決了上述問題。

本發明實施例提供了一種基于丟失塊修復的分布式多視點視頻解碼的方法，所述方法應用于解碼端，所述方法包括：

針對接收到的關鍵幀碼流進行幀內解碼，并判斷所述關鍵幀碼流是否出現丟失，所述關鍵幀碼流由編碼端發送；

在所述關鍵幀碼流出現丟失的情況下，根據視點內差錯隱藏算法和視點間差錯隱藏算法分別修復丟失的關鍵幀得到第一修復關鍵幀、第二修復關鍵幀；

采用融合算法，計算所述第一修復關鍵幀的時域邊信息的峰值信噪比，得到所述第一修復關鍵幀的時域邊信息的質量；

采用所述融合算法，計算所述第二修復關鍵幀的空域邊信息的峰值信噪比，得到所述第二修復關鍵幀的空域邊信息的質量；

在所述時域邊信息的質量高于所述空域邊信息的質量的情況下，以所述第一修復關鍵幀作為所述丟失的關鍵幀的解碼結果；

在所述時域邊信息的質量低于所述空域邊信息的質量的情況下，以所述第二修復關鍵幀作為所述丟失的關鍵幀的解碼結果。

可選地，在所述關鍵幀碼流出現丟失的情況下，根據視點內差錯隱藏算法修復丟失的關鍵幀，包括：

提取所述丟失的關鍵幀中丟失宏塊周邊寬度為n的相鄰區域為待匹配子圖；

根據打包方式，獲取已正確解碼的所述丟失的關鍵幀的前一關鍵幀中對應所述丟失宏塊位置的第一宏塊及其附近的所有宏塊，在所述丟失的關鍵幀的前一關鍵幀中以所述第一宏塊為中心，提取出寬度為m的方形基準圖像；

基于所述方形基準圖像，利用匹配算法尋找最佳匹配子圖；

通過所述最佳匹配子圖的像素點位置確定所述丟失宏塊對應的運動矢量；

利用第一宏塊和所述運動矢量填充所述丟失宏塊，以修復所述丟失的關鍵幀。

可選地，在所述關鍵幀碼流出現丟失的情況下，根據視點間差錯隱藏算法修復丟失的關鍵幀，包括：