[發明專利]一種視點合成預測編碼方法、解碼方法、對應的裝置及碼流

有效

• 申請號: 201210125366.2
• 申請日: 2012-04-25
• 公開（公告）號: CN103379349A
• 公開（公告）日: 2013-10-30
• 發明（設計）人: 趙寅;虞露
• 申請（專利權）人: 浙江大學
• 主分類號: H04N13/00
• 分類號: H04N13/00;H04N7/32
• 代理公司: 杭州宇信知識產權代理事務所(普通合伙) 33231
• 代理人: 張宇娟

1.一種視點合成預測編碼方法，其特征在于，當編碼三維視頻序列中一個視點V1中的一個圖像I時，采用一種合成精度X，由所述三維視頻序列中另一個已編碼視點V2中的重建圖像和重建深度，合成所述視點V1中一個區域H1的視點合成圖像P，所述視點合成圖像P用于產生編碼圖像I的過程中視點合成預測需要的預測像素；同時，將所述合成精度X寫入所述三維視頻序列的碼流中，其中視點V1即當前編碼視點。

2.如權利要求1所述的一種視點合成預測編碼方法，其特征在于，所述合成精度X的獲得方法包括以下方法之一：

1)采用N種合成精度分別合成當前編碼視點V1中一個區域H2的視點合成圖像Pn，其中N≥2，1≤n≤N，N、n為整數；計算各個視點合成圖像Pn與圖像I中對應區域的圖像之間的相似度，從所有視點合成圖像Pn中選擇相似度最高的視點合成圖像對應的合成精度作為所述合成精度X；

2)計算所述圖像I中K個區域H3k中像素的方差Vk，取像素的方差Vk的平均值V，通過關于平均值V的函數f(V)，導出所述合成精度X，其中1≤k≤K，k為整數；所述函數f(V)例如，其中E為常數，如E＝15，表示對x下取整，所述合成精度X為1/D像素精度。

3.如權利要求2所述的一種視點合成預測編碼方法，其特征在于，1)中所述“計算各個視點合成圖像Pn與圖像I中對應區域的圖像之間的相似度”包括以下方法之一：

方法一：對所述視點合成圖像Pn中的M1個像素Q1m，分別計算各像素Q1m與所述圖像I中對應位置的像素R1m之間的差值D1m，其中1≤n≤N，1≤m≤M1，m、M1為正整數，M1小于等于所述的區域H2中的總像素數；計算D1m絕對值的平均值ValA或D1m平方值的平均值ValB，所述平均值ValA或平均值ValB越小，所述視點合成圖像Pn與所述圖像I中對應區域的圖像之間的相似度越高；

方法二：對所述視點合成圖像Pn中的M2個像素Q2m，計算各像素Q2m和所述圖像I中對應位置的像素R2m之間的線性相關系數C，所述線性相關系數C越大，所述視點合成圖像Pn與所述圖像I中對應區域的圖像之間的相似度越高，其中1≤n≤N，1≤m≤M2，n、N、m、M2為正整數，M2小于等于所述的區域H2中的總像素數。

4.一種視點合成預測解碼方法，其特征在于，當解碼三維視頻序列中一個視點V1中的一個圖像I時，從所述三維視頻序列的碼流中解析出所述圖像I對應的合成精度X；采用所述合成精度X，由所述三維視頻序列中另一個已解碼視點V2中的重建圖像和重建深度合成所述視點V1中一個區域H1的視點合成圖像P，所述視點合成圖像P用于產生解碼圖像I的過程中視點合成預測需要的預測像素。

5.一種視點合成預測編碼裝置，其特征在于包括以下兩個模塊：

視點合成圖像生成模塊，采用一種合成精度X生成視點合成圖像，其輸入包括合成精度X、三維視頻序列中一個已編碼視點V2中的重建圖像和重建深度、以及所述已編碼視點V2和當前編碼視點V1的攝像機參數信息，其輸出包括所述視點V1中一個區域H1的視點合成圖像P，其完成的處理包括在編碼所述視點V1中的一個圖像I時，采用所述合成精度X，由所述已編碼視點V2中的重建圖像和重建深度，合成所述視點V1中一個區域H1的視點合成圖像P，所述視點合成圖像P用于產生編碼圖像I的過程中視點合成預測需要的預測像素；

合成精度寫入模塊，將所述合成精度X寫入所述三維視頻序列的碼流，其輸入包括所述合成精度X和所述三維視頻序列的碼流，其輸出包括含有所述合成精度X的三維視頻序列碼流，其完成的處理包括將所述合成精度X寫入所述三維視頻序列的碼流。