[發明專利]圖像合成裝置、圖像合成方法及記錄介質

有效

• 申請號: 201880017415.6
• 申請日: 2018-02-23
• 公開（公告）號: CN110431835B
• 公開（公告）日: 2022-03-04
• 發明（設計）人: 與那霸誠
• 申請（專利權）人: 富士膠片株式會社
• 主分類號: H04N5/232
• 分類號: H04N5/232;G06T5/50;H04N1/387
• 代理公司: 中科專利商標代理有限責任公司 11021
• 代理人: 高穎

本發明提供一種圖像合成裝置，其具備：圖像獲取部(22)，獲取從第1方向及第2方向拍攝目標物和障礙物而得的第1圖像及第2圖像；區域確定部(34)，對于顯示在顯示部(24)的顯示畫面上的第1圖像及第2圖像，接收表示拍到目標物且未拍到障礙物的目標物區域的區域指定而對目標物區域進行確定；對應點信息獲取部(36)，獲取表示第1圖像與第2圖像的對應點的對應點信息；幾何變換信息獲取部(38)，根據對應點信息獲取幾何變換信息；幾何變換部(40)，根據幾何變換信息對第2圖像的目標物區域進行幾何變換；及圖像合成部(42)，對第1圖像的目標物區域和經幾何變換的第2圖像的目標物區域進行合成而生成合成圖像。

技術領域

本發明涉及一種能夠由包含障礙物像的多個圖像可靠地生成消除了障礙物像的合成圖像的圖像合成裝置、圖像合成方法及程序。

背景技術

以往，已知一種由多個圖像生成一張圖像的技術。

專利文獻1中，為了解決很難得到廣范圍且高精細的圖像，且為無伴隨連接處理的誤差的累積的圖像的課題，記載有相對于廣角圖像合成長焦圖像的技術。具體而言，獲取從相同的攝影位置拍攝到的廣角圖像和長焦圖像，通過手動操作指定4組以上的廣角圖像與長焦圖像的對應點(合成基準點)，根據該經指定的4組以上的對應點計算投影變換式，利用該經計算的投影變換式對長焦圖像進行投影變換，并將該經投影變換的長焦圖像合成到廣角圖像中。

專利文獻2中，為了解決與專利文獻1相同的課題，記載有在校正圖像變形之后連接多個分割圖像的技術。具體而言，通過手動操作指定4點以上的已知坐標值的點，根據該經指定的4點以上的點的坐標值校正各圖像的圖像變形，并連接該校正了圖像變形的多個圖像。

并且，已知一種技術，當攝影條件中存在規則性時，自動補充圖像中的拍到障礙物的區域。

專利文獻3中記載有一種技術，補充通過介于固定設置的相機與手術中的手術部位之間的醫生所產生的遮蔽區域。具體而言，預先計算出相機圖像之間的投影變換矩陣(投影參數)，根據醫生的穿戴物(手術帽、手術手套等)的顏色、形狀等特性檢測醫生的頭及手的區域來作為遮蔽區域，并利用預先計算出的投影變換矩陣進行遮蔽區域的補充。

專利文獻4中記載有一種技術，在能夠拍攝障礙物的位置設置第1相機，并且在拍攝障礙物的背后的位置設置第2相機，對包含通過第1相機拍攝到的障礙物像的影像合成通過第2相機拍攝到的障礙物的后背的影像。具體而言，檢測在第1相機的影像中拍到但在第2相機的影像中未拍到的物體來作為障礙物，抽取四點第1相機的影像與第2相機的影像的對應點而計算投影變換矩陣(變換參數)，利用該經計算的投影變換矩陣變換第2相機的影像并使其相對于第1相機的影像半透明地重合。

專利文獻5中記載有如下，即在生成任意視點圖像時，檢測在多個圖像之間無對應點的區域來作為遮蔽區域，并且利用經檢測出的圖像之間的對應點的組求出投影變換矩陣(投影變換系數)，并利用該投影變換矩陣進行遮蔽區域的補充。

以往技術文獻

專利文獻

專利文獻1：日本特開2007-164258號公報

專利文獻2：日本特開2004-21578號公報

專利文獻3：日本特開2017-005288號公報

專利文獻4：日本特開2009-055332號公報

專利文獻5：日本特開2016-213578號公報

發明內容

發明要解決的技術課題

實際上有時很難由包含障礙物像的多個圖像生成消除了障礙物像的合成圖像。