[發明專利]虛擬現實視差校正

在審

• 申請號: 202210503333.0
• 申請日: 2018-08-08
• 公開（公告）號: CN114785996A
• 公開（公告）日: 2022-07-22
• 發明（設計）人: S·J·迪維爾迪;A·B·S·帕徹尤;A·P·赫茨曼
• 申請（專利權）人: 奧多比公司
• 主分類號: H04N13/117
• 分類號: H04N13/117;H04N13/122;H04N13/128;H04N13/271;H04N13/279;H04N13/332;H04N13/344;H04N13/366;G06T19/00;G06T17/20;G06T15/20;G06N3/08;G06N3/04;G0
• 代理公司: 北京市金杜律師事務所 11256
• 代理人: 酆迅

1.一種由虛擬現實VR設備實現的方法，用以在數字媒體環境中校正虛擬現實VR數字內容中的偽像，所述方法包括：

通過所述虛擬現實設備，檢測由運動遠離原點而引起的視角的改變；

通過所述虛擬現實設備，基于所檢測到的所述改變來生成視角數據，所述視角數據描述從相對于所述VR數字內容的原始視角到相對于所述VR數字內容的改變視角的變化；

通過所述虛擬現實設備，基于所述視角數據和與所述原始視角相關聯的原始三角網格來生成視角三角網格；

通過所述虛擬現實設備，生成已校正視差三角網格，所述已校正視差三角網格對所述視角三角網格中的至少一個偽像進行校正，所述偽像由所檢測的視角的改變引起，并且生成已校正視差三角網格是至少部分地基于生成與所述視角三角網格的像素的深度相關聯的置信度值；以及

通過所述虛擬現實設備，基于所述已校正視差三角網格來渲染所述VR數字內容。

2.根據權利要求1所述的方法，其中生成所述已校正視差三角網格至少部分基于深度過濾。

3.根據權利要求1所述的方法，其中生成所述已校正視差三角網格至少部分基于作為通過使用神經網絡的機器學習的一部分的深度邊界的標識。

4.根據權利要求1所述的方法，其中生成所述已校正視差三角網格至少部分基于對作為所述視角三角網格的一部分而被包括的三角形的檢查。

5.根據權利要求4所述的方法，其中所述檢查基于近似于相應的所述三角形的視圖方向的表面法線、相應的所述三角形的邊緣長度、或者相應的所述三角形的面積。

6.根據權利要求5所述的方法，還包括基于針對VR數字內容的部分中的像素的相應的所述置信度值來對相應所述部分進行模糊。

7.根據權利要求5所述的方法，其中生成所述已校正視差三角網格至少部分基于生成如下的所述已校正視差三角網格，所述已校正視差三角網格中的至少一個像素的深度被描述為深度值范圍的分布。

8.一種在數字媒體環境中用以校正虛擬現實VR數字內容中的至少一個偽像的VR系統，所述VR系統包括：

由所述VR系統的處理系統實現的視角檢測模塊，用以：

檢測由運動遠離原點而引起的視角的改變；

基于所檢測到的所述改變來生成視角數據，所述視角數據描述從相對于所述VR數字內容的原始視角到相對于所述VR數字內容的改變視角的變化；

由所述VR系統的所述處理系統實現的視角改變模塊，用以基于所述視角數據和與所述原始視角相關聯的原始三角網格來生成視角三角網格；

由所述VR系統的所述處理系統實現的視差校正模塊用以，生成已校正視差三角網格，所述已校正視差三角網格對所述視角三角網格中的至少一個偽像進行校正，所述偽像由所檢測的視角的改變引起，所述視差校正模塊包括拖尾檢測模塊，所述拖尾檢測模塊被配置為基于對作為所述視角三角網格的一部分而被包括的三角形的檢查來生成所述已校正視差三角網格；

由所述VR系統的所述處理系統實現的內容渲染模塊，基于所述已校正視差三角網格來渲染所述VR數字內容。

9.根據權利要求8所述的系統，還包括由所述VR系統的所述處理系統實現的三角網格生成模塊，用以基于像素和相對于所述VR數字內容的原始視角的相關聯三維坐標來生成原始三角網格。

10.根據權利要求8所述的系統，其中所述視差校正模塊還包括所述視差校正模塊還包括深度過濾模塊，所述深度過濾模塊用以至少部分基于深度過濾來生成所述已校正視差三角網格。

11.根據權利要求8所述的系統，其中所述視差校正模塊還包括邊界表示模塊，所述視差校正模塊還包括邊界標識模塊，所述邊界標識模塊用以基于作為通過使用神經網絡的機器學習的一部分的深度邊界的標識來生成所述已校正視差三角網格。