[發明專利]通過頭戴式VR顯示設備實現人機交互的方法及裝置

在審

• 申請號: 202010115656.3
• 申請日: 2020-02-25
• 公開（公告）號: CN111338476A
• 公開（公告）日: 2020-06-26
• 發明（設計）人: 劉奎斌
• 申請（專利權）人: 上海唯二網絡科技有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01
• 代理公司: 北京興智翔達知識產權代理有限公司 11768
• 代理人: 蔣常雪

本發明實施例提供一種通過頭戴式VR顯示設備實現人機交互的方法及裝置，包括：當VR場景中顯示人機交互界面時，獲取頭戴式VR顯示設備當前的姿態數據；基于當前的姿態數據，確定用戶頭部當前的運動狀態；基于用戶頭部當前的運動狀態，確定用戶頭部的組合動作；根據用戶的組合動作匹配抽象控制指令，以響應VR場景中顯示的人機交互界面。本發明實施例提供的通過頭戴式VR顯示設備實現人機交互的方法及裝置，從軟件上的實現人機交互，無需硬件改進，VR應用不再需要適配各個不同VR設備的物理控制設備，降低了VR應用適配難度，拓寬了VR應用適配VR設備的范圍。

技術領域

本發明涉及虛擬現實技術領域，尤其涉及一種通過頭戴式VR顯示設備實現人機交互的方法及裝置。

背景技術

所謂虛擬現實，顧名思義，就是虛擬和現實相互結合。從理論上來講，虛擬現實技術(VR)是一種可以創建和體驗虛擬世界的計算機仿真系統，它利用計算機生成一種模擬環境，使用戶沉浸到該環境中。虛擬現實技術就是利用現實生活中的數據，通過計算機技術產生的電子信號，將其與各種輸出設備結合使其轉化為能夠讓人們感受到的現象，這些現象可以是現實中真真切切的物體，也可以是我們肉眼所看不到的物質，通過三維模型表現出來。因為這些現象不是我們直接所能看到的，而是通過計算機技術模擬出來的現實中的世界，故稱為虛擬現實。

常見的VR產品為頭戴式VR顯示設備，現有技術中，通常通過頭戴式VR顯示設備的姿態來控制VR場景或者其他設備，例如，通過相應的頭部運動，可以實現VR場景在不同方向上移動，當用戶頭部往左轉且用戶點頭時，表示用戶想要控制VR場景的顯示界面往左下方向移動。再例如，通過頭戴式VR顯示設備的姿態角控制無人機的吊艙姿態角度，用戶左右搖頭的角度對應吊艙的航向角，上下點頭的角度對應吊艙的俯仰角。而針對VR場景中的人機交互，例如，對話框的操作控制，依然需要通過外部物理設備來實現，外部物理設備包括手柄、遙控器等，用戶通過手動操作手柄或遙控器上的按鈕、搖桿、觸控板等實現向VR系統輸入抽象控制指令。

但是，由于頭戴式VR顯示設備，需覆蓋雙眼，通過外部物理設備如手柄或遙控器操作VR系統，實現人機交互，不但用戶操作不方便，而且各個VR設備的手柄和遙控器標準不統一，無法或很難在同一個VR應用中完全適配。

發明內容

本發明實施例提供一種通過頭戴式VR顯示設備實現人機交互的方法及裝置，用于解決現有技術中的上述技術問題。

為了解決上述技術問題，一方面，本發明實施例提供一種通過頭戴式VR顯示設備實現人機交互的方法，包括：

當VR場景中顯示人機交互界面時，獲取頭戴式VR顯示設備當前的姿態數據；

基于當前的姿態數據，確定用戶頭部當前的運動狀態；

基于用戶頭部當前的運動狀態，確定用戶頭部的組合動作；

根據用戶的組合動作匹配抽象控制指令，以響應VR場景中顯示的人機交互界面。

進一步地，所述基于當前的姿態數據，確定用戶頭部當前的運動狀態，具體包括：

將當前的姿態數據與前一次采集的姿態數據做對比，確定對比結果；

根據所述對比結果和預設閾值的關系，確定用戶頭部當前的運動狀態。

進一步地，所述運動狀態的種類至少包括左轉、右轉、左擺、右擺、低頭和抬頭中的任一種。

進一步地，所述基于用戶頭部當前的運動狀態，確定用戶頭部的組合動作，具體包括：

遍歷當前采集到的運動狀態記錄及之后的若干條運動狀態記錄；

逐條對比預定義組合動作是否匹配當前記錄，如果匹配，則記錄一個組合動作。

進一步地，所述預定義組合動作的種類至少包括點頭、搖頭、左側點擊和右側點擊中的任一種。