[發明專利]用于360度立體視頻的無縫左/右視圖

有效

• 申請號: 201110443455.7
• 申請日: 2011-12-16
• 公開（公告）號: CN102595168A
• 公開（公告）日: 2012-07-18
• 發明（設計）人: H·扎爾加坡;B·沃特;江勝明;M·龍迪內利
• 申請（專利權）人: 微軟公司
• 主分類號: H04N13/02
• 分類號: H04N13/02;H04N13/00;G03B37/00
• 代理公司: 上海專利商標事務所有限公司 31100
• 代理人: 陳斌

1.一種從多個圖像傳感器形成立體圖像的方法，包括如下步驟：

(a)將來自不同圖像傳感器的第一組圖像(174，176，178)組合(步驟270)在一起，所述第一組圖像被用作所述立體圖像中的左側視角且所述第一組圖像是在具有所述第一組圖像的重疊的情況下組合的；

(b)將來自所述不同圖像傳感器的第二組圖像(180，182，184)組合(步驟270)在一起，所述第二組圖像被用作所述立體圖像中的右側視角且所述第二組圖像是在具有所述第二組圖像的重疊的情況下組合的；

(c)移除(步驟274)所述第一和第二組圖像的重疊區域中的一對圖像之間的縫的出現，所述步驟(c)包括如下步驟：

i)通過將第一圖像在第一方向上在所述重疊的第一邊界處拉伸0倍而在相對邊界處拉伸1倍而將所述重疊區域中來自兩個不同圖像的對象對齊(步驟284)；以及

ii)通過將第二圖像在與所述第一方向相反的第二方向上在所述重疊的第二邊界處拉伸0倍而在相對邊界處拉伸1倍而將所述重疊區域中來自所述兩個不同圖像的對象對齊(步驟284)。

2.如權利要求1所述的方法，其特征在于，還包括對于組合后的第一組圖像在三個重疊區域的每個中如所述步驟(c)中那樣移除差異以及對于組合后的第二組圖像在三個重疊區域的每個中如所述步驟(c)中那樣移除差異的步驟。

3.如權利要求1所述的方法，其特征在于，在所述步驟(c)中被對齊的對象是高頻對象。

4.如權利要求1所述的方法，其特征在于，還包括在所述步驟(c)(i)和(c)(ii)中對齊所述對象之后對所述重疊區域的左半部和右半部應用拉普拉斯混合的步驟。

5.如權利要求1所述的方法，其特征在于，所述步驟(c)(i)和(c)(ii)包括在所述重疊區域中將不同對象拉伸不同水平距離的步驟。

6.一種從多個圖像傳感器形成立體圖像的方法，包括如下步驟：

(a)將具有視差的第一組圖像(174，176，178)組合(步驟270)在一起，所述第一組圖像被用作所述立體圖像中的左側視角(186)且所述第一組圖像是在具有所述第一組圖像的重疊的情況下組合的；

(b)將具有視差的第二組圖像(180，182，184)組合(步驟270)在一起，所述第二組圖像被用作所述立體圖像中的右側視角(188)且所述第二組圖像是在具有所述第二組圖像的重疊的情況下組合的；

(c)移除(步驟274)所述第一和第二組圖像的重疊區域中的一對圖像之間的縫的出現，所述步驟(c)包括如下步驟：

i)使用重疊區域中的對應像素之間的水平和/或垂直差異來計算(步驟284)光學流，

ii)使用經加權的因子從左向右交叉淡化(步驟286)，所述因子從左向右增加，

iii)使用經加權的因子從右向左交叉淡化(步驟286)，所述因子從右向左增加，

iv)使用在步驟(c)(ii)和(c)(iii)中修改的流來變形(步驟288)，以及

v)在所述重疊區域的左半部和右半部之間應用(步驟290)拉普拉斯混合。

7.如權利要求6所述的方法，其特征在于，步驟(c)(ii)和(c)(iii)中使用的所述經加權的因子從0增加到1。

8.如權利要求6所述的方法，其特征在于，所述第一組圖像是從彼此以三角關系排列的三個圖像傳感器捕捉的。

9.如權利要求6所述的方法，其特征在于，所述第二組圖像是從與捕捉所述第一組圖像的相同的三個圖像傳感器捕捉的。

10.一種用于對處理器(620)進行編程以執行一種從三個圖像傳感器形成立體圖像的方法的機器可讀存儲介質(630，641，655)，所述方法包括如下步驟：

(a)將來自所述三個圖像傳感器的第一組三個圖像(174，176，178)組合(步驟270)在一起，圍繞360度全景拍攝的所述第一組三個圖像被用作所述全景的所述立體圖像中的左側視角(186)，所述第一組圖像是在具有重疊的情況下組合的；

(b)將來自所述三個圖像傳感器的第二組三個圖像(180，182，184)組合(步驟270)在一起，圍繞360度全景拍攝的所述第二組三個圖像被用作所述全景的所述立體圖像中的右側視角(188)，所述第二組圖像是在具有重疊的情況下組合的；

(c)移除(步驟274)所述第一和第二組圖像的重疊區域中的一對圖像之間的縫的出現，所述步驟(c)包括如下步驟：

i)使用重疊區域中的對應對象之間的水平和/或垂直差異來計算(步驟284)光學流，

ii)使用在重疊區域的左邊緣處的0和所述重疊區域的右邊緣處的1之間加權的因子來從左向右交叉淡化(步驟286)，

iii)使用在重疊區域的右邊緣處的0和所述重疊區域的左邊緣處的1之間加權的因子來從右向左交叉淡化(步驟286)，

iv)使用在步驟(c)(ii)和(c)(iii)中修改的流來變形(步驟288)，以及

v)在所述重疊區域的左半部和右半部之間應用(步驟290)拉普拉斯混合。