[發明專利]一種基于動態捕捉與全息投影的遠程交互方法

在審

• 申請號: 201710466807.8
• 申請日: 2017-06-20
• 公開（公告）號: CN107463248A
• 公開（公告）日: 2017-12-12
• 發明（設計）人: 婁澤華;殷繼彬
• 申請（專利權）人: 昆明理工大學
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06T19/00;H04L29/08;H04N13/02;H04N13/04
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.一種基于動態捕捉和全息投影的遠程交互方法，其特征在于：包括如下步驟：

（一）數據采集

1.1在云端存儲共享虛擬場景，利用建模軟件繪制出模型周圍的虛擬場景，在云端提供多種常用模型場景的共享；

1.2在云端存儲共享虛擬模型，利用建模軟件制作出經典的虛擬模型，在云端提供多種常用虛擬模型的共享；

1.3在用戶個人的數據庫內存儲自定義虛擬場景，用戶自定義的虛擬場景，是通過建模軟件建模或者通過照片拍照建模方式建立的場景；

1.4在用戶個人的數據庫內存儲自定義虛擬模型，用戶自定義的虛擬模型，是通過建模軟件建模或者三維人體掃描儀掃描出的目標模型；

1.5使用光運動捕捉設備進行運動捕捉，捕捉到精確的骨骼運動數據，骨骼運動數據實時傳輸到云端以與虛擬模型實時綁定；

1.6使用音頻輸入設備進行語音捕捉，語音數據實時傳輸到云端以與虛擬模型實時綁定；

（二） 數據處理

2.1云端建立邏輯主機管理一級邏輯從機；

2.2一級邏輯從機調用個人模型數據、骨骼運動數據、場景數據、實時語音進行綁定，并按用戶預設處理合成的場景，同時分配三個虛擬攝像機位置：分別是一個觀察者視角與兩個獨立的交互者眼睛視角；

2.3一級邏輯從機下設兩個二級邏輯從機，用于信息的發送和接收，默認分別用來從兩個獨立的交互者眼睛視角來觀察場景，用戶設定觀察者視角時，將其對應的二級邏輯從機使用觀察者視角；

（三）圖像呈現

客戶端使用三維全息立體投影技術將接收到的云端處理好的立體場景全息信息投影到空氣或者水霧上，實現用戶與三維影像的交互。

2.根據權利要求1所述的基于動態捕捉和全息投影的遠程交互方法，其特征在于：所述數據處理中可在研討中心或者展廳中設置邏輯從機用于進行多個人信息的同時綁定和合成，實現群組視頻功能。

3.根據權利要求1所述的基于動態捕捉和全息投影的遠程交互方法，其特征在于：所述數據采集中利用3DMAX或者MAYA軟件繪制虛擬場景，可集成到客戶端的系統功能中。

4.根據權利要求1所述的基于動態捕捉和全息投影的遠程交互方法，其特征在于：所述客戶端利用Kinect進行模糊捕捉，研究機構的演示通過光運動捕捉進行精確高速捕捉，展廳和報告廳可以使用群組功能，或將模型綁定機器人來進行遠程實體操作。