[發(fā)明專利]多視角圖像的注視校正

有效

• 申請?zhí)枺?/td>: 201780006239.1
• 申請日: 2017-01-04
• 公開（公告）號: CN108463787B
• 公開（公告）日: 2021-11-30
• 發(fā)明（設(shè)計）人: E·薩默雷德;M·G·魯賓遜
• 申請（專利權(quán)）人: 瑞爾D斯帕克有限責任公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;H04N13/344;H04N13/117
• 代理公司: 北京嘉和天工知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11269
• 代理人: 嚴慎;王維

1.一種調(diào)節(jié)頭部的多視角圖像以校正注視的方法，所述方法包括：

在所述多視角圖像的每個圖像中，分別識別包含所述頭部的左眼和右眼的圖像塊；

針對在所述多視角圖像的每個圖像中包含所述頭部的所述左眼的所述圖像塊，并且還針對在所述多視角圖像的每個圖像中包含所述頭部的所述右眼的所述圖像塊，執(zhí)行以下步驟：

從所述多視角圖像的至少一個圖像中的所述圖像塊的多個本地圖像描述符導出特征向量；以及

使用所導出的特征向量查找包括與所述特征向量的可能值相關(guān)聯(lián)的參考位移向量場的參考數(shù)據(jù)，從而導出表示圖像塊的變換的位移向量場；以及

通過根據(jù)所導出的位移向量場變換包含所述頭部的所述左眼和所述右眼的所述圖像塊，從而調(diào)節(jié)所述多視角圖像的每個圖像。

2.根據(jù)權(quán)利要求1所述的方法，其中

所述多個本地圖像描述符是所述多視角圖像的每個圖像中的多個本地圖像描述符，并且

所述參考數(shù)據(jù)包括用于所述多視角圖像的每個圖像的參考位移向量場對，所述參考位移向量場對與所述特征向量的可能值相關(guān)聯(lián)。

3.根據(jù)權(quán)利要求1所述的方法，其中

所述多個本地圖像描述符是所述多視角圖像的一個圖像中的多個本地圖像描述符，

導出位移向量場的所述步驟包括：

使用所述所導出的特征向量查找包括與所述特征向量的可能值相關(guān)聯(lián)的參考位移向量場的參考數(shù)據(jù)，從而導出表示所述多視角圖像的所述一個圖像中的所述圖像塊的變換的位移向量場；以及

通過根據(jù)所述多視角圖像的所述一個圖像和一個或多個其他多視角圖像中的所述圖像塊之間的光流的估計值來變換表示所述多視角圖像的所述一個圖像中的所述圖像塊的變換的所述所導出的位移向量場，從而導出表示所述一個或多個其他多視角圖像中的所述圖像塊的變換的位移向量場。

4.根據(jù)權(quán)利要求1所述的方法，其中

所述多視角圖像是立體圖像對，所述多個本地圖像描述符是所述立體對的兩個圖像中的多個本地圖像描述符，

導出位移向量場的所述步驟包括：

使用所述所導出的特征向量查找包括與所述特征向量的可能值相關(guān)聯(lián)的參考位移向量場的參考數(shù)據(jù)，從而導出初始位移向量場，所述初始位移向量場表示概念性圖像中的概念性圖像塊的概念性變換，所述概念性圖像具有相對于所述多視角圖像的相機位置的概念性相機位置；以及

通過根據(jù)所述概念性圖像中的所述概念性圖像塊與所述多視角圖像的所述圖像中的所述圖像塊之間的光流的估計值來變換所述初始位移向量場，從而導出表示所述多視角圖像的每個圖像中的所述圖像塊的變換的位移向量場。

5.根據(jù)權(quán)利要求4所述的方法，其中所述概念性相機位置介于所述立體對的所述圖像的所述相機位置之間。

6.根據(jù)前述權(quán)利要求中任一項所述的方法，其中

導出位移向量場的所述步驟包括針對所述多視角圖像的每個圖像中的所述圖像塊導出位移向量場，以及

變換包含所述頭部的所述左眼和所述右眼的所述圖像塊的所述步驟是根據(jù)針對所述多視角圖像的每個圖像中的所述圖像塊導出的所述位移向量場來進行的。

7.根據(jù)權(quán)利要求1至5中任一項所述的方法，其中

導出位移向量場的所述步驟包括針對所述多視角圖像的每個圖像中的所述圖像塊導出位移向量場，并且從針對所述多視角圖像的每個圖像中的所述圖像塊導出的所述位移向量場進一步導出合并的位移向量場，以及

變換包含所述頭部的所述左眼和所述右眼的所述圖像塊的所述步驟是根據(jù)所述合并的位移向量場來進行的。

8.根據(jù)權(quán)利要求7所述的方法，其中

所述參考位移向量場進一步與置信度值相關(guān)聯(lián)，

針對所述多視角圖像的每個圖像中的所述圖像塊導出位移向量場的所述步驟還包括導出與每個所導出的位移向量場相關(guān)聯(lián)的置信度值，并且

所述合并的位移向量場是由所導出的置信度值加權(quán)的、針對所述多視角圖像的每個圖像中的所述圖像塊導出的所述位移向量場的平均。