[發明專利]一種基于深度圖像繪制的立體視頻編碼方法

有效

• 申請號: 201110322717.4
• 申請日: 2011-10-21
• 公開（公告）號: CN102438167A
• 公開（公告）日: 2012-05-02
• 發明（設計）人: 邵楓;蔣剛毅;郁梅
• 申請（專利權）人: 寧波大學
• 主分類號: H04N13/00
• 分類號: H04N13/00;H04N15/00;H04N7/26
• 代理公司: 寧波奧圣專利代理事務所(普通合伙) 33226
• 代理人: 程曉明;周玨

1.一種基于深度圖像繪制的立體視頻編碼方法，其特征在于包括以下步驟：

①將外部立體視頻捕獲工具捕獲得到的未經處理的且顏色空間為YUV的彩色立體視頻及其對應的深度立體視頻定義為原始三維立體視頻，在空域上該原始三維立體視頻包括原始左視點三維視頻和原始右視點三維視頻，原始左視點三維視頻包括原始左視點彩色視頻和原始左視點深度視頻，原始左視點彩色視頻主要由若干個幀組的原始左視點彩色圖像組成，原始左視點深度視頻主要由若干個幀組的原始左視點深度圖像組成，原始右視點三維視頻包括原始右視點彩色視頻和原始右視點深度視頻，原始右視點彩色視頻主要由若干個幀組的原始右視點彩色圖像組成，原始右視點深度視頻主要由若干個幀組的原始右視點深度圖像組成；

②將t時刻的原始左視點彩色圖像記為將t時刻的原始左視點深度圖像記為將t時刻的原始右視點彩色圖像記為將t時刻的原始右視點深度圖像記為其中，i＝1，2，3分別表示YUV顏色空間的三個分量，YUV顏色空間的第1個分量為亮度分量并記為Y、第2個分量為第一色度分量并記為U及第3個分量為第二色度分量并記為V，(x，y)表示彩色圖像或深度圖像中像素點的坐標位置，1≤x≤W，1≤y≤H，W表示彩色圖像或深度圖像的寬度，H表示彩色圖像或深度圖像的高度，表示t時刻的原始左視點彩色圖像中坐標位置為(x，y)的像素點的第i個分量的值，表示t時刻的原始左視點深度圖像中坐標位置為(x，y)的像素點的深度值，表示t時刻的原始右視點彩色圖像中坐標位置為(x，y)的像素點的第i個分量的值，表示t時刻的原始右視點深度圖像中坐標位置為(x，y)的像素點的深度值；

③采用基于深度圖像繪制的方法，將t時刻的原始左視點彩色圖像從左視點投影到右視點，得到t時刻的原始右視點彩色圖像的繪制圖像，記為其中，表示t時刻的原始右視點彩色圖像的繪制圖像中坐標位置為(x，y)的像素點的第i個分量的值；

④計算t時刻的原始右視點彩色圖像與t時刻的原始右視點彩色圖像的繪制圖像的殘差圖像，記為Et,iR(x,y)=It,iR(x,y)-I~t,iR(x,y),]]>其中，表示中坐標位置為(x，y)的像素點的第i個分量的值；

⑤對t時刻的原始右視點彩色圖像與t時刻的原始右視點彩色圖像的繪制圖像的殘差圖像進行預處理操作，得到預處理后的t時刻的原始右視點彩色圖像與t時刻的原始右視點彩色圖像的繪制圖像的殘差圖像，記為其中，表示中坐標位置為(x，y)的像素點的第i個分量的值；

⑥根據設定的編碼預測結構對t時刻的原始左視點彩色圖像進行編碼，再將編碼后的左視點彩色圖像經網絡傳輸給解碼端；在解碼端對編碼后的左視點彩色圖像進行解碼，獲得解碼后的t時刻的左視點彩色圖像，記為其中，表示解碼后的t時刻的左視點彩色圖像中坐標位置為(x，y)的像素點的第i個分量的值；

⑦根據設定的編碼預測結構對預處理后的t時刻的原始右視點彩色圖像與t時刻的原始右視點彩色圖像的繪制圖像的殘差圖像進行編碼，再將編碼后的t時刻的殘差圖像經網絡傳輸給解碼端；在解碼端對編碼后的t時刻的殘差圖像進行解碼，獲得解碼后的t時刻的殘差圖像，記為其中，表示解碼后的t時刻的殘差圖像中坐標位置為(x，y)的像素點的第i個分量的值；

⑧采用與步驟③相同的操作，將解碼后的t時刻的左視點彩色圖像從左視點投影到右視點，得到解碼后的t時刻的右視點彩色圖像的繪制圖像，記為其中，表示解碼后的t時刻的右視點彩色圖像的繪制圖像中坐標位置為(x，y)的像素點的第i個分量的值；

⑨根據解碼后的t時刻的右視點彩色圖像的繪制圖像和解碼后的t時刻的殘差圖像得到解碼后的t時刻的右視點彩色圖像的最終重構圖像，記為其中，表示解碼后的t時刻的右視點彩色圖像的最終重構圖像中坐標位置為(x，y)的像素點的第i個分量的值。