[發明專利]用于確定深度細化圖像捕獲指令的方法、存儲設備和系統

有效

• 申請號: 201510484211.1
• 申請日: 2015-08-07
• 公開（公告）號: CN105721852B
• 公開（公告）日: 2018-12-14
• 發明（設計）人: 湯慧旋;S·科恩;S·席勒;B·普賴斯
• 申請（專利權）人: 奧多比公司
• 主分類號: H04N5/222
• 分類號: H04N5/222;H04N5/232;G06T7/571;H04N13/271;G06T5/00;G06T5/50
• 代理公司: 北京市金杜律師事務所 11256
• 代理人: 酆迅

本發明的各實施方式總體上涉及用于深度圖細化的數字相機的設置。具體地，公開了用于標識可以被用來細化現有的深度圖的用于捕獲圖像的深度細化圖像捕獲指令的系統和方法。通過在與現有的深度圖對應的現有圖像中的每個圖像分塊處評估在配置設置的集合上的一系列可能的深度值來確定深度細化圖像捕獲指令。每系列可能的深度值與現有的深度圖的現有的深度估計對應。這一評估使得能夠以如下方式選擇一個或多個配置設置：該方式使得將存在能夠從利用所選擇的配置設置捕獲的一個或多個附加圖像得到的附加深度信息。當使用一個或多個附加圖像生成細化的深度圖時，這一附加深度信息被用來增加用于來自現有的深度圖的至少一個深度估計的深度精度。

相關申請的交叉引用

本申請涉及2014年11月24日提交的共同待決的美國申請序列號14/552,332以及與此同時提交的美國申請序列號____，上述每個申請的全部內容由此通過引用被合并。

技術領域

本公開內容總體上涉及用于確定用于數字相機以及要由數字相機使用這些設置來捕獲的大量圖像的配置設置以改進深度信息的方法和系統。

版權通知

本專利文檔的公開內容的一部分包含涉及版權保護的材料。版權擁有者不反對任何人對專利文檔或者專利公開的拓制，因為其出現在專利和商標局的專利文件或者記錄中，但是另外無論如何保留所有版權權利。

背景技術

數字相機(包括集成到移動設備中的數字單鏡頭反射(DSLR)相機和數字相機)通常具有使得用戶能夠使用不同用戶的定義的和相機定義的配置設置的組合來捕獲數字圖像的復雜的硬件和軟件。數字圖像提供特定場景的數字表示。隨后可以通過其自身或者與場景的其他圖像的組合來處理數字圖像，以從圖像中取得附加信息。例如，可以處理場景的一個或多個圖像以估計在場景內描繪的對象的深度，即，每個對象到從該處得到圖像的位置的距離。用于場景中的每個對象的深度估計或者可能的圖像內的每個像素被包括在稱為“深度圖”的文件中。其中，深度圖可以用于改善現有的圖像編輯技術(例如剪切、孔洞填充、到圖像的層的復制等)。

傳統上，使用各種技術之一來生成深度圖。這樣的技術包括來自散焦技術的深度，其使用焦距未對準的模糊來估計成像場景的深度。使用這樣的技術的深度估計是可能的，因為成像的場景位置取決于用以得到圖像的相機配置設置(例如光圈設置和焦距設置)而將具有不同量的焦距未對準的模糊(即深度信息)。估計深度因此包括估計不同場景位置處的大量深度信息，深度信息從場景的一個圖像還是從場景的多個圖像取得。傳統上，這樣的深度估計的精度取決于所使用的圖像的數目。通常而言，輸入的圖像的數目越大，能夠針對場景中的任何一個位置(例如像素)而被比較的深度信息的量就越大。

因此，來自散焦技術的很多傳統的深度可能需要輸入圖像的大量集合以便以更高的確定程度來估計場景深度。然而，傳統的技術不能預測性地確定可選數目的圖像以及以任何特定的確定程度來估計場景深度圖所需要的對應的相機配置設置。傳統的技術也不能用于分析現有的深度圖以預測性地確定可以使用特定相機配置設置來捕獲的場景的大量附加圖像，使得足夠多的深度信息會可用于細化現有的深度圖(即改善其深度估計的精度)。

因此，期望提供用于分析現有的深度圖或者其他場景深度信息以預測性地確定場景的要捕獲的大量附加圖像以及用于捕獲其的相機配置設置的改進的解決方案，使得足夠的深度信息可用于細化由現有的深度圖或者其他的場景深度信息提供的深度估計。

發明內容