[發明專利]用于利用深度信息的全視差壓縮光場合成的方法

有效

• 申請號: 201680023384.6
• 申請日: 2016-04-21
• 公開（公告）號: CN107430782B
• 公開（公告）日: 2021-06-04
• 發明（設計）人: D.B.格拉西奧斯;Z.Y.阿爾帕斯蘭;H.S.埃爾-古勞里
• 申請（專利權）人: 奧斯坦多科技公司
• 主分類號: G06T15/00
• 分類號: G06T15/00;G06T7/00;G06K9/00;G02B6/00
• 代理公司: 中國專利代理(香港)有限公司 72001
• 代理人: 周學斌;鄭冀之

描述了一種用于合成壓縮光場的創新性方法。壓縮光場通常通過對光場視圖進行再采樣來生成。必須然后通過利用來自壓縮光場的信息來在顯示器處對經壓制的視圖進行合成。本發明描述了一種用于視圖合成的方法，其利用場景的深度信息來重構缺失視圖。一種與有效孔洞填充過程耦合的創新性視圖合并方法補償了深度未配準和不精確性，以產生用于全視差光場顯示器的現實的合成視圖。

相關申請的交叉引用

本申請要求2015年4月23日提交的編號為62/151,616的美國臨時專利申請的權益。

背景技術

1. 發明領域

本發明一般涉及圖像和視頻合成，更特別地涉及用作用于光場3D成像系統的輸入的光場圖像數據的合成。術語“光場”描述了光的傳輸和調制，包括：方向、幅度、頻率和相位，因此對利用了諸如全息攝影、積分成像、體視法、多視圖成像、自由視點TV（FTV）等技術的成像系統進行了概述。

2. 現有技術

光場顯示器對光的強度和方向進行調制以用于在不需要用于觀看的專門眼鏡的情況下重構場景的3D對象。為了達成這一點，光場顯示器通常利用大量視圖，其在3D處理鏈的采集階段和傳輸階段中提出了若干挑戰。壓縮是處理所涉及的海量數據大小的必需工具，并且通常而言系統在生成階段對視圖進行再采樣以及在顯示器處重構缺失視圖。例如，在Yan等人的“Integral image compression based on optical characteristic”（Computer Vision，IET，Vol. 5，no. 3，第164、168頁（2011年5月））以及Yan Piao等人的“Sub-sampling elemental images for integral imaging compression”（2010 International Conference on Audio Language and Image Processing（ICALIP），第1164、1168頁（2010年11月23-25日））中，作者基于顯示系統的光學特性執行對基本圖像的再采樣。可以在Jin-Xiang Chai等人的著作（2000）Plenoptic sampling（Proceedings ofthe 27^th annual conference on Computer graphics and interactive techniques（SIGGRAPH'00））以及Gilliam.C等人的“Adaptive plenoptic sampling”（2011 18th IEEE International Conference on Image Processing (ICIP)，第2581、 2584頁 (2011年9月11-14日））中找到一種用于光場采樣的更正式的方法。為了在顯示器側重構視圖，可以從計算機圖像方法到基于圖像的渲染來使用若干不同的方法。