[發(fā)明專利]圖像處理裝置、圖像處理方法和圖像處理系統(tǒng)

在審

• 申請?zhí)枺?/td>: 201980080325.6
• 申請日: 2019-12-10
• 公開（公告）號: CN113170081A
• 公開（公告）日: 2021-07-23
• 發(fā)明（設計）人: 長田浩二;齊藤崇;青山幸治;橫山一樹
• 申請（專利權(quán)）人: 索尼集團公司
• 主分類號: H04N7/18
• 分類號: H04N7/18;B60R1/00;G06T1/00;G08G1/16
• 代理公司: 中國貿(mào)促會專利商標事務所有限公司 11038
• 代理人: 周磊

簡化實現(xiàn)通過運動視差提供距離感。通過在捕獲車輛后側(cè)的圖像而獲得的捕獲圖像上疊加示出車輛的圖像來獲得顯示圖像。例如，示出車輛的圖像是計算機圖形圖像。例如，根據(jù)駕駛員的視點的運動改變捕獲圖像和示出車輛的圖像之間的疊加位置關系。由于顯示圖像不僅根據(jù)通過捕獲車輛后側(cè)的圖像而獲得的捕獲圖像得出，而且通過在捕獲圖像上疊加顯示車輛的圖像來獲得顯示圖像，因此可以易于通過運動視差提供距離感。

技術領域

本技術涉及圖像處理裝置、圖像處理方法和圖像處理系統(tǒng)，并且更具體地涉及適于應用于車載電子鏡的圖像處理裝置等。

背景技術

常規(guī)上已經(jīng)提出了車載電子鏡，其中車輛的后視鏡(室鏡和左右門鏡)用相機和顯示器替換。專利文獻1提出了用于通過使用駕駛員頭部相對于顯示器的相對位置來改變要在顯示器上顯示的相機圖像的范圍的技術，以便解決電子鏡中的外觀與實際鏡子中的外觀的差異。

引文列表

專利文獻

專利文獻1：日本專利申請公開號2013-216286

發(fā)明內(nèi)容

本發(fā)明要解決的問題

駕駛員視覺識別的重要信息之一是從運動視差獲得的距離感。在移動視點時，人類根據(jù)體的透視位置從體變化的出現(xiàn)和消失現(xiàn)象中感知與體的距離以及各體之間的相對距離。專利文獻1中提出的技術不能有助于上述感知。

作為實現(xiàn)提供適當運動視差的系統(tǒng)的常見方法，使用了從通過多個相機捕獲的多視點視頻圖像生成各個對象的3D模型、并在虛擬空間中重新布置3D模型的技術。近年來，這種技術已經(jīng)開始用于電視廣播，諸如觀看體育賽事。然而，一系列圖像處理所需的計算量是巨大的，并且向?qū)崟r且計算受限系統(tǒng)(諸如車載電子鏡)的應用需要等待圖像處理性能的進一步改善。

本技術的目的是容易地通過運動視差提供距離感。

解決問題的方案

本技術的概念是

一種圖像處理裝置，包括：

處理單元，被配置為通過在通過捕獲上述車輛后側(cè)的圖像而獲得的捕獲圖像上疊加示出車輛的圖像，來獲得顯示圖像。

在本技術中，處理單元在通過捕獲車輛后側(cè)的圖像而獲得的捕獲圖像上疊加示出車輛的圖像，以獲得顯示圖像。例如，示出車輛的圖像可以是計算機圖形圖像。使用計算機圖形圖像允許在生成示出車輛的圖像中更高的自由度。

例如，通過捕獲車輛后側(cè)的圖像而獲得的捕獲圖像可以是由附接到車輛后部的圖像捕獲設備捕獲的捕獲圖像，并且示出車輛的圖像可以是車輛內(nèi)部圖像。在該情況下，顯示圖像對應于室鏡顯示。此外，例如，通過捕獲車輛后側(cè)的圖像而獲得的捕獲圖像可以包括由附接到車輛側(cè)部的圖像捕獲設備捕獲的捕獲圖像，并且示出車輛的圖像可以是車身圖像。在該情況下，顯示圖像對應于側(cè)視鏡顯示。

如上描述的，在本技術中，在通過捕獲車輛后側(cè)的圖像而獲得的捕獲圖像上疊加示出車輛的圖像而獲得顯示圖像。在該情況下，由于顯示圖像不僅根據(jù)通過捕獲車輛后側(cè)的圖像而獲得的捕獲圖像得出，而且通過在捕獲圖像上疊加顯示車輛的圖像來獲得顯示圖像，因此可以容易地通過運動視差提供距離感。

注意，在本技術中，例如，處理單元可以根據(jù)駕駛員視點的運動改變捕獲圖像和示出車輛的圖像之間的疊加位置關系。該配置可以生成與觀看實際后視鏡的運動視差接近的運動視差，并且可以輔助駕駛員對距離的感知。

在該情況下，例如，可以使處理單元將捕獲圖像和示出車輛的圖像布置在三維空間中，獲得根據(jù)駕駛員視點的運動改變的虛擬視點位置，并且根據(jù)由虛擬視點位置確定的視野將捕獲圖像和示出車輛的圖像轉(zhuǎn)換到投影坐標系中，以獲取顯示圖像。該配置使得可以根據(jù)駕駛員視點的運動準確地改變捕獲圖像和示出車輛的圖像之間的疊加位置關系。