[發(fā)明專利]圖像處理裝置、圖像處理方法以及圖像顯示系統(tǒng)

有效

• 申請?zhí)枺?/td>: 201880056163.8
• 申請日: 2018-08-28
• 公開（公告）號: CN111052735B
• 公開（公告）日: 2022-01-04
• 發(fā)明（設(shè)計）人: 鶴見辰吾
• 申請（專利權(quán)）人: 索尼公司
• 主分類號: H04N7/18
• 分類號: H04N7/18;B60R1/00;B60R11/02;G06T7/593;G06T19/00
• 代理公司: 中國貿(mào)促會專利商標(biāo)事務(wù)所有限公司 11038
• 代理人: 王玉璽

1.一種圖像處理裝置，包括：

距離測量部，所述距離測量部測量從預(yù)定的移動物體到測量目標(biāo)范圍中的其他物體的距離，并將在預(yù)定距離內(nèi)的所述其他物體識別為障礙物；以及

圖像生成部，所述圖像生成部在假設(shè)將鏡子虛擬地設(shè)置在從所述移動物體中的預(yù)定的視點位置觀察所述障礙物的方向的上方的情況下，生成通過所述鏡子的反射能夠至少看到所述移動物體和所述障礙物并且能夠直觀地識別出所述移動物體和所述障礙物之間的距離的虛擬鏡子圖像，并使布置為從所述視點位置觀察時覆蓋所述測量目標(biāo)范圍的至少部分的顯示裝置顯示所述虛擬鏡子圖像，

其中所述圖像生成部在能夠從所述視點位置看到所述障礙物的顯示位置處顯示所述虛擬鏡子圖像，

其中所述虛擬鏡子圖像是基于以下中的至少一者來生成的：

由以所述測量目標(biāo)范圍作為視角捕獲圖像的圖像捕獲裝置捕獲的圖像；或者

以三維形狀表示所述移動物體的至少包括所述測量目標(biāo)范圍的周邊環(huán)境中的所述其他物體的3D模型。

2.根據(jù)權(quán)利要求1所述的圖像處理裝置，其中，

所述圖像生成部通過對由所述圖像捕獲裝置從高于所述視點位置的位置所捕獲的圖像施加視點變換來生成所述虛擬鏡子圖像。

3.根據(jù)權(quán)利要求2所述的圖像處理裝置，還包括：

物體識別處理部，所述物體識別處理部基于由所述圖像捕獲裝置所捕獲的圖像來識別由所述距離測量部識別的所述障礙物的屬性，其中

所述圖像生成部使所述顯示裝置根據(jù)所述障礙物的位置來顯示指示所述障礙物的屬性的圖像。

4.根據(jù)權(quán)利要求1所述的圖像處理裝置，還包括：

3D建模部，所述3D建模部生成所述3D模型，其中

所述圖像生成部基于所述3D模型，確定虛擬地布置的鏡子的位置和姿勢，從而使得能夠從所述視點位置由虛擬鏡子圖像觀察到至少所述移動物體和所述障礙物。

5.根據(jù)權(quán)利要求4所述的圖像處理裝置，其中，

所述圖像生成部通過使用所述3D模型在從虛擬布置的鏡子側(cè)觀察所述移動物體與所述障礙物之間的方向上執(zhí)行渲染，來生成所述虛擬鏡子圖像。

6.根據(jù)權(quán)利要求4所述的圖像處理裝置，還包括：

運動估計部，用于估計所述移動物體的運動，其中

所述3D建模部基于由所述運動估計部估計的所述移動物體的運動和由所述距離測量部測量的到所述其他物體的距離來生成所述3D模型。

7.根據(jù)權(quán)利要求6所述的圖像處理裝置，其中，

所述3D建模部累積生成的3D模型，并根據(jù)由所述運動估計部估計的所述移動物體的運動來估計進入不能通過所述距離測量部測量距離的盲區(qū)的障礙物的位置，以生成所述3D模型。

8.根據(jù)權(quán)利要求1所述的圖像處理裝置，其中所述圖像捕獲裝置包括立體圖像捕獲單元，所述圖像處理裝置還包括：

所述立體圖像捕獲單元，所述立體圖像捕獲單元包括以所述測量目標(biāo)范圍作為視角捕獲圖像的至少兩個圖像捕獲部，并且通過使用這些圖像捕獲部來捕獲具有視差的立體圖像，其中

所述距離測量部通過使用所述立體圖像來測量到所述其他物體的距離。

9.根據(jù)權(quán)利要求1所述的圖像處理裝置，其中，

根據(jù)由所述距離測量部測量的到所述障礙物的距離，執(zhí)行針對所述障礙物的警報的警報處理。

10.根據(jù)權(quán)利要求9所述的圖像處理裝置，其中，

通過改變所述虛擬鏡子圖像的顏色來執(zhí)行所述警報處理。

11.根據(jù)權(quán)利要求1所述的圖像處理裝置，其中，

所述圖像生成部根據(jù)所述距離測量部對所述障礙物的位置移動的測量來移動所述虛擬鏡子圖像的顯示位置。