[發明專利]VR交互方法、系統、移動終端及計算機可讀存儲介質

有效

• 申請號: 202110726237.8
• 申請日: 2021-06-29
• 公開（公告）號: CN113407031B
• 公開（公告）日: 2023-04-18
• 發明（設計）人: 張韶華;賀波;張波;李放;王杰;郝宗良;趙柏濤;王海濤;楊西銀;溫煒;汪江;馬雯雯;丁旭元
• 申請（專利權）人: 國網寧夏電力有限公司;國網寧夏電力有限公司培訓中心
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06F3/0484;G06N3/0464
• 代理公司: 上海雍灝知識產權代理事務所(普通合伙) 31368
• 代理人: 沈汶波

1.一種VR交互方法，其特征在于，所述方法包括：

根據用戶發送的VR交互指令確定待交互場景，并對所述待交互場景進行三維圖像投影，得到VR交互場景；

對所述VR交互場景內的所述用戶進行動作特征采集，得到動作采集特征，并對所述動作采集特征進行時序同步處理，得到動作時序特征，所述動作采集特征包括骨架位置特征和動作力度特征，所述動作時序特征包括骨架時序特征和力度時序特征；

根據所述骨架時序特征確定所述用戶的體感姿勢，并根據所述力度時序特征確定對應所述體感姿勢的姿勢力度；

根據所述體感姿勢和所述姿勢力度生成VR交互信息，并根據所述VR交互信息對所述VR交互場景執行VR交互操作；

所述根據所述體感姿勢和所述姿勢力度生成VR交互信息，包括：

確定所述體感姿勢的姿勢時長，并將所述體感姿勢的姿勢時長、姿勢標識和所述姿勢力度與預存儲的交互信息查詢表進行匹配，得到所述VR交互信息，所述交互信息查詢表中存儲有不同姿勢時長、不同姿勢標識、不同姿勢力度與對應VR交互信息之間的對應關系；

所述根據所述VR交互信息對所述VR交互場景執行VR交互操作，包括：

獲取所述VR交互場景的場景標識，并根據所述場景標識和所述VR交互信息確定場景漸變信息，所述場景漸變信息包括所述場景標識和所述VR交互信息對應的VR漸變圖像和交互響應；

根據所述場景漸變信息中的VR漸變圖像對所述VR交互場景進行圖像漸變操作，并根據所述場景漸變信息中的交互響應對所述用戶進行信息響應。

2.如權利要求1所述的VR交互方法，其特征在于，所述對所述VR交互場景內的所述用戶進行動作特征采集，得到動作采集特征，包括：

對所述VR交互場景內的所述用戶進行圖像采集，得到采集圖像，并對所述采集圖像進行特征提取，得到圖像特征；

根據所述圖像特征進行姿態預估，得到所述骨架位置特征，所述骨架位置特征包括不同骨架關鍵點與對應位置坐標之間的對應關系；

對所述VR交互場景內的所述用戶進行力觸覺采集，得到力觸覺采集信號，并根據所述力觸覺采集信號確定所述用戶的動作力度值，得到所述動作力度特征，所述動作力度特征包括所述用戶上不同動作力度采集點與對應動作力度值之間的對應關系。

3.如權利要求2所述的VR交互方法，其特征在于，所述對所述動作采集特征進行時序同步處理，得到動作時序特征，包括：

分別確定所述圖像采集和所述力觸覺采集的采集頻率，并根據確定到的所述采集頻率確定目標時序，所述目標時序包括所述采集圖像與所述力觸覺采集信號之間相同的采集時間點；

根據所述目標時序，分別對所述骨架位置特征和所述動作力度特征進行特征篩選，并根據所述采集時間點，對特征篩選后的所述骨架位置特征和所述動作力度特征分別進行排序，得到所述骨架時序特征和所述力度時序特征。

4.如權利要求2所述的VR交互方法，其特征在于，所述根據所述骨架時序特征確定所述用戶的體感姿勢，包括：

根據所述骨架時序特征，確定每個所述骨架關鍵點的移動軌跡，并將不同所述骨架關鍵點的移動軌跡進行組合，得到組合軌跡；

將所述組合軌跡與預存儲的體感姿勢查詢表進行匹配，以得到所述組合軌跡對應的所述體感姿勢，所述體感姿勢查詢表中存儲有不同組合軌跡與體感姿勢之間的對應關系。

5.如權利要求2所述的VR交互方法，其特征在于，所述對所述VR交互場景內的所述用戶進行圖像采集，得到采集圖像之后，還包括：

根據預設腐蝕算子對所述采集圖像進行卷積處理，以及確定卷積處理后的所述采集圖像中，所述腐蝕算子對應的映射區域；

獲取所述映射區域中像素點的最小值，并將所述像素點的最小值對所述采集圖像中的指定像素點進行替換。