[發明專利]AR影像生成裝置、存儲介質、控制方法及玩具組件

有效

• 申請號: 201810094303.2
• 申請日: 2018-01-31
• 公開（公告）號: CN108986188B
• 公開（公告）日: 2022-08-30
• 發明（設計）人: 本河明廣;上島拓
• 申請（專利權）人: 株式會社多美
• 主分類號: G06T13/40
• 分類號: G06T13/40;G06T19/00
• 代理公司: 北京聿宏知識產權代理有限公司 11372
• 代理人: 吳大建;霍玉娟

提供一種AR影像生成裝置。基于表示背景物體的三維模型的信息、表示待配置于背景物體的地面上的虛擬物體的信息和拍攝距離、拍攝角度等拍攝條件，生成虛擬物體配置完畢背景物體的虛擬圖像作為AR影像生成用中間圖像，以該拍攝條件對在背景物體的地面上的指定位置配置有虛擬物體的狀態進行拍攝時應該能夠得到虛擬物體配置完畢背景物體的虛擬圖像，將中間圖像在背景物體現實圖像之上進行位置匹配并重疊，并且，對中間圖像中的背景物體圖像部分進行處理，使其透明化，以便透視看見位于其下方的背景物體現實圖像，從而將作為目的的AR影像顯示在顯示部上。

相關申請的交叉引用

本申請要求享有于2017年5月30日提交的名稱為“AR影像生成裝置”的日本專利申請2017-106967的優先權，該申請的全部內容通過引用并入本文中。

技術領域

本發明涉及一種增強現實(以下稱為“AR”)影像的生成裝置，特別涉及一種在以任意的拍攝條件對提供虛擬物體配置面的背景物體進行拍攝而得到的現實影像上，重疊與所期望的虛擬物體相當的虛擬影像，從而生成AR影像的AR影像生成裝置。

背景技術

以往已知有如下AR影像生成裝置：在以任意的拍攝條件(例如，姿勢、距離)對提供虛擬物體配置面(例如，地面、墻面等)的背景物體進行拍攝而得到的現實影像上，重疊(配置)與所期望的虛擬物體(例如，通過CG制作的人偶、車輛等靜止物體或移動物體)相當的虛擬影像，從而生成AR影像(例如，參照專利文獻1)。

但是，在這樣生成的AR影像中，利用動畫技法，為了使虛擬物體看起來是沿著期望的路徑在背景物體的例如地面上無不協調感地移動(行走、行駛)，需要進行準確的沿面移動控制，以使得現實影像的基礎圖像中的沿著期望路徑的背景物體地面高度與虛擬影像的基礎圖像中的虛擬物體基準高度始終滿足一定的關系。

作為這樣的沿面移動控制的一個例子，可列舉為：通過對現實影像的基礎圖像進行圖像識別處理，計算沿著期望路徑的背景物體地面高度，進行沿面移動控制，以使像這樣計算求得的背景物體地面高度與虛擬影像的基礎圖像中的虛擬物體基準高度始終滿足一定的關系。

現有技術文獻

專利文獻

專利文獻1：日本特開2011-204047號公報

發明內容

發明要解決的問題

當應用于供虛擬物體配置的地面、墻面等面較為平坦的背景物體的情況下，利用上述圖像識別處理的沿面移動控制是有效的，但是在應用于虛擬物體配置面具有復雜的高低差或凹凸的背景物體的情況下，由于圖像識別能力的限制，難以準確地計算背景物體的表面高度，其結果是，構成虛擬物體的CG人偶、CG車輛以離開背景物體的地面而懸浮于空中的狀態行走、行駛，或者偏離期望的路徑地行走、行駛，或者其一部分潛入地面地行走、行駛，產生不自然的AR影像，有時給觀看的人以不協調感。

另外，在利用圖像識別處理的沿面移動控制中，由于圖像識別能力的限制，在與背景物體相當的二維圖像中，遠近感的識別較為困難，其結果是，盡管待配置的虛擬物體由于位于其他物體的背后而原本應使其一部分隱藏而不可見，但是虛擬物體卻被錯誤識別為位于前方而整體露出，產生不自然的AR影像，有時給觀看的人以不協調感。

本發明是著眼于這樣的技術性背景而完成的，其目的在于，即使在應用于在虛擬物體配置面上具有復雜的高低差或凹凸的背景物體的情況下，也能夠針對虛擬物體而生成確保了沿面追隨性、遠近識別性的視覺上自然的AR影像。

通過參照說明書的以下記載，本領域技術人員應該能夠容易地理解本發明的另外其他目的以及作用效果。

用于解決問題的方法