[發明專利]虛實融合系統及其方法

在審

• 申請號: 201811218335.5
• 申請日: 2018-10-19
• 公開（公告）號: CN111083391A
• 公開（公告）日: 2020-04-28
• 發明（設計）人: 丁建雄;龐加慶;張本好;陳遠;胡增新
• 申請（專利權）人: 舜宇光學（浙江）研究院有限公司
• 主分類號: H04N5/262
• 分類號: H04N5/262;H04N13/275
• 代理公司: 寧波理文知識產權代理事務所(特殊普通合伙) 33244
• 代理人: 羅京;孟湘明

1.一虛實融合系統，其特征在于，包括：

一環境采集單元，用于采集現實環境的信息，以獲得數字化的環境數據；

一輸入單元，用于輸入數字化的虛擬物體數據；

一處理單元，用于處理所述虛擬物體數據和所述環境數據，以獲得一虛實融合數據；以及

一輸出單元，用于基于所述虛實融合數據，實時輸出虛實融合物體，以獲得實時反饋。

2.如權利要求1所述的虛實融合系統，其中，所述輸入單元包括一位置記錄模塊和一繪制模塊，其中所述位置記錄模塊用于記錄一繪畫工具在該現實環境中的運動軌跡，以獲得該繪畫工具的運動軌跡數據，其中所述繪制模塊用于基于所述運動軌跡數據，繪制虛擬物體，以獲得實時繪制的所述虛擬物體數據。

3.如權利要求2所述的虛實融合系統，其中，所述位置記錄模塊選自由慣性測量單元、視覺里程計和視覺慣性里程計所組成的群組中的任一種或幾種的組合。

4.如權利要求1所述的虛實融合系統，其中，所述輸入單元還用于輸入預制的虛擬物體數據，使得所述處理單元能夠將所述預制的虛擬物體數據與所述環境數據相融合。

5.如權利要求2所述的虛實融合系統，其中，所述輸入單元還用于輸入預制的虛擬物體數據，使得所述處理單元能夠將所述預制的虛擬物體數據與所述環境數據相融合。

6.如權利要求1至5中任一所述的虛實融合系統，其中，所述處理單元包括一通信模塊和一融合模塊，其中所述通信模塊用于將來自所述環境采集單元的所述環境數據和來自所述輸入單元的所述虛擬物體數據傳輸給所述融合模塊，其中所述融合模塊用于將所述虛擬物體數據與所述環境數據相融合，以獲得所述虛實融合數據。

7.如權利要求6所述的虛實融合系統，其中，所述處理單元還包括一賦值模塊，用于將真實物理屬性賦予所述虛實融合數據，使得該虛實融合物體具備真實物體的物理屬性。

8.如權利要求7所述的虛實融合系統，其中，所述真實物理屬性選自由體積屬性、重力屬性、顏色屬性以及材質屬性所組成的群組中的任一種或幾種的組合。

9.如權利要求6所述的虛實融合系統，其中，所述輸入單元還包括一指令生成模塊，其中所述指令生成模塊用于產生控制指令，并將所述控制指令發送至所述處理單元，其中所述處理單元還包括一控制模塊，其中所述控制模塊用于響應于所述控制指令，調節所述虛擬物體數據與所述環境數據之間的融合關系，以改變虛實物體在所述現實環境中的位置和/或角度。

10.如權利要求1至5中任一所述的虛實融合系統，其中，所述輸出單元包括一顯示模塊，用于基于所述虛實融合數據，視覺地輸出該虛實融合物體。

11.如權利要求10所述的虛實融合系統，其中，所述輸出單元還包括一聲音模塊，用于基于所述虛實融合數據，聽覺地輸出該虛實融合物體。

12.如權利要求1至5中任一所述的虛實融合系統，其中，所述環境采集單元包括一攝像頭傳感器，用于獲取該現實環境的圖像信息，以獲得所述環境數據中的圖像數據。

13.如權利要求12所述的虛實融合系統，其中，所述環境采集單元還包括一距離傳感器，用于探測該現實環境的深度信息，以獲得所述環境數據中的深度數據。

14.如權利要求12所述的虛實融合系統，其中，所述環境采集單元還包括一溫度傳感器，用于采集該現實環境的溫度信息，以獲得所述環境數據中的溫度數據。