[發(fā)明專利]一種虛擬視點合成方法及系統(tǒng)

有效

• 申請?zhí)枺?/td>: 201380003165.8
• 申請日: 2013-07-29
• 公開（公告）號: CN104756489B
• 公開（公告）日: 2018-01-23
• 發(fā)明（設(shè)計）人: 李晨霞;王榮剛;高文
• 申請（專利權(quán)）人: 北京大學深圳研究生院
• 主分類號: H04N13/00
• 分類號: H04N13/00
• 代理公司: 深圳鼎合誠知識產(chǎn)權(quán)代理有限公司44281
• 代理人: 郭燕,任葵

1.一種虛擬視點合成方法，其特征在于，包括：

建立左視點虛擬視圖和右視點虛擬視圖，在虛擬視點中，坐標為(u，v)的像素取(u，v)到(u+1，v)的像素塊，即I(u)＝[u,u+1)；

所述左視點虛擬視圖在左視點參考視圖中搜索候選像素，所述右視點虛擬視圖在右視點參考視圖中搜索候選像素，對于左視點虛擬視圖和/或右視點虛擬視圖中搜索不到候選像素的像素塊，則標記為洞點；

對搜索到的候選像素按照深度排序并依次計算前景系數(shù)和背景系數(shù)，依據(jù)所述前景系數(shù)和背景系數(shù)進行加權(quán)求和，對于當前像素的深度值與加權(quán)的第一個像素的深度值差超過第一預(yù)定閾值的，則不參與加權(quán)求和；

將左視點虛擬視圖和/或右視點虛擬視圖的洞點區(qū)域向背景方向擴大，去除鬼影像素；

對所述左視點虛擬視圖和右視點虛擬視圖進行視點合成；

對合成圖像進行洞點填補。

2.如權(quán)利要求1所述的虛擬視點合成方法，其特征在于，所述左視點虛擬視圖在左視點參考視圖中搜索候選像素，所述右視點虛擬視圖在右視點參考視圖中搜索候選像素，對于左視點虛擬視圖和/或右視點虛擬視圖中搜索不到候選像素的像素塊，則標記為洞點，還包括：

在參考視圖中搜索候選像素，設(shè)置第一調(diào)節(jié)參數(shù)，所述第一調(diào)節(jié)參數(shù)為預(yù)設(shè)初始值時，若搜索不到候選參數(shù)的像素塊，則對所述第一調(diào)節(jié)參數(shù)加1，重新搜索，若仍然搜索不到候選參數(shù)的像素快，則標記為洞點。

3.如權(quán)利要求1所述的虛擬視點合成方法，其特征在于，

所述前景系數(shù)通過計算；

所述背景系數(shù)通過計算；

其中I_j(u_r,t)＝[u_r-t,u_r+1+t)為參考視點中的像素塊，t為第二調(diào)節(jié)參數(shù)，I^j(u)表示在虛擬視點像素塊中，還沒有被之前的像素遮擋的比重；

依據(jù)所述前景系數(shù)和背景系數(shù)進行加權(quán)求和的公式為：

其中α_j根據(jù)像素的深度值控制在合成過程中所占的權(quán)重，C(u)為候選像素集。

4.如權(quán)利要求1所述的虛擬視點合成方法，其特征在于，所述將左視點虛擬視圖和/或右視點虛擬視圖的洞點區(qū)域向背景方向擴大，去除鬼影像素，具體包括：

對左視點和/或右視點虛擬視圖逐行掃描，當檢查到洞點時，記錄洞點起始位置，繼續(xù)向右掃描，找到洞點區(qū)域的右邊界，然后對左右邊界各自依次向外取預(yù)定數(shù)量的像素，計算其深度平均值，分別記為d_left、d_right，計算所述d_left、d_right的差值，與第二預(yù)定閾值比較，決定洞區(qū)擴充方向：

若d_left-d_right大于所述第二預(yù)定閾值，向左側(cè)擴充；

若d_left-d_right小于所述第二預(yù)定閾值，向右側(cè)擴充；

若d_left-d_right等于所述第二預(yù)定閾值，不擴充。

5.如權(quán)利要求1至4中任一項所述的虛擬視點合成方法，其特征在于，所述對所述左視點虛擬視圖和右視點虛擬視圖進行視點合成，包括：

所述左視點虛擬視圖和右視點虛擬視圖均有像素值時，按照與左右視點的距離關(guān)系做加權(quán)求和；

所述左視點虛擬視圖和右視點虛擬視圖中只有一幅虛擬圖像有像素值，另一幅虛擬圖像的對應(yīng)點為洞點時，直接取該像素值；

所述左視點虛擬視圖和右視點虛擬視圖均為洞點時，保留洞點。