[發明專利]虛擬訓練方法、裝置以及虛擬訓練系統

在審

• 申請號: 202210072468.6
• 申請日: 2022-01-21
• 公開（公告）號: CN114220312A
• 公開（公告）日: 2022-03-22
• 發明（設計）人: 何惠東;韓鵬;張浩;陳麗莉;姜倩文;杜偉華;石娟娟;秦瑞峰
• 申請（專利權）人: 北京京東方顯示技術有限公司;京東方科技集團股份有限公司
• 主分類號: G09B9/00
• 分類號: G09B9/00;G06F3/01
• 代理公司: 北京華夏泰和知識產權代理有限公司 11662
• 代理人: 盧萬騰

1.一種虛擬訓練方法，其特征在于，所述方法包括：

在訓練者進行虛擬訓練的過程中，通過可穿戴設備獲取所述訓練者的肢體姿態數據，以及通過圖像采集模塊獲取所述訓練者進行虛擬訓練時的真實場景圖像；

基于所述真實場景圖像，生成與預設的訓練模式相匹配的虛擬訓練場景；

基于所述真實場景圖像和所述肢體姿態數據，確定虛擬對象在所述虛擬訓練場景中的移動軌跡；

按照所述移動軌跡，對所述虛擬訓練場景中的所述虛擬對象進行移動，以實現在虛擬訓練過程中通過訓練者的肢體對所述虛擬對象進行虛擬控制。

2.根據權利要求1所述的方法，其特征在于，所述方法還包括：

在訓練者進行虛擬訓練的過程中，通過頭戴式設備獲取所述訓練者的頭部姿態數據；

所述基于所述真實場景圖像，生成與預設的訓練模式相匹配的虛擬訓練場景，包括：

基于所述頭部姿態數據和預設的訓練模式，生成虛擬場景圖像；

將所述虛擬場景圖像和所述真實場景圖像進行融合，得到與所述訓練模式相匹配的虛擬訓練場景，其中，所述頭部姿態數據和所述真實場景圖像對應相同的采集時刻。

3.根據權利要求2所述的方法，其特征在于，所述將所述虛擬場景圖像和所述真實場景圖像進行融合，包括：

基于預設的顏色空間，對所述虛擬場景圖像和所述真實場景圖像分別進行劃分，得到所述虛擬場景圖像在所述顏色空間包括的每一子空間下的第一圖像子集，以及得到所述真實場景圖像在每一所述子空間下的第二圖像子集；

將每一所述第一圖像子集分別與其對應的第二圖像子集進行融合，其中，所述第一圖像子集與其對應的第二圖像子集對應同一所述子空間。

4.根據權利要求3所述的方法，其特征在于，所述基于預設的顏色空間，對所述虛擬場景圖像和所述真實場景圖像分別進行劃分，得到所述虛擬場景圖像在所述顏色空間包括的每一子空間下的第一圖像子集，以及得到所述真實場景圖像在每一所述子空間下的第二圖像子集，包括：

針對所述虛擬場景圖像和所述真實場景圖像中的每一像素點，根據所述像素點在每一顏色通道下的分量值，從預設的顏色空間中確定對應的子空間，其中，所述像素點在每一顏色通道下的分量值分別落入其對應子空間在該顏色通道下的分量范圍；

將所述虛擬場景圖像中，對應同一子空間的像素點歸入同一第一圖像子集，得到所述虛擬場景圖像在所述顏色空間包括的每一子空間下的第一圖像子集；

將所述真實場景圖像中，對應同一子空間的像素點歸入同一第二圖像子集，得到所述真實場景圖像在所述顏色空間包括的每一子空間下的第二圖像子集。

5.根據權利要求3所述的方法，其特征在于，所述將每一所述第一圖像子集分別與其對應的第二圖像子集進行融合，包括：

針對每一第一圖像子集，對所述第一圖像子集和其對應的第二圖像子集分別進行小波變換，得到所述第一圖像子集和其對應的第二圖像子集中每一像素點的頻域值；

根據所述頻域值，對所述第一圖像子集和其對應的第二圖像子集分別進行頻域劃分，得到所述第一圖像子集對應的M個第一頻域區域以及所述第二圖像子集對應的M個第二頻域區域；

將每一所述第一頻域區域分別與其對應的第二頻域區域進行融合，其中，所述第一頻域區域與其對應的第二頻域區域對應同一頻域。

6.根據權利要求5所述的方法，其特征在于，所述將每一所述第一頻域區域分別與其對應的第二頻域區域進行融合，包括：

針對每一所述第一頻域區域，確定所述第一頻域區域的第一低頻帶能量值，以及確定所述第一頻域區域對應的第二頻域區域的第二低頻帶能量值；

根據所述第一低頻帶能量值與所述第二低頻帶能量值確定目標圖像融合策略；

按照所述目標圖像融合策略，將所述第一頻域區域與其對應的第二頻域區域進行融合。