[發明專利]基于頭戴式顯示設備的交互方法及裝置

有效

• 申請號: 201611270065.3
• 申請日: 2016-12-30
• 公開（公告）號: CN108268126B
• 公開（公告）日: 2021-05-04
• 發明（設計）人: 徐夢瑤
• 申請（專利權）人: 成都理想智美科技有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06F3/0481
• 代理公司: 暫無信息
• 代理人: 暫無信息

本發明提供一種基于頭戴式顯示設備的交互方法，包括以下步驟：獲取全景圖像；連接頭戴式顯示設備與手持式外設，確定所述手持式外設在所述全景圖像對應的空間坐標系中的坐標；根據所述手持式外設在所述空間坐標系中的坐標，在所述頭戴式顯示設備的顯示界面中顯示所述手持式外設對應的標識。本發明同時提供一種基于頭戴式顯示設備的交互裝置。本發明基于頭戴式顯示設備的交互方法及裝置，能夠使使用者在佩戴頭戴式顯示設備時，便捷地通過持握手持式外設對顯示界面中的內容進行交互操作，顯著地提升了頭戴式顯示設備使用者的操作體驗。

技術領域

本發明涉及智能可穿戴設備與人機交互技術領域，尤其涉及一種基于頭戴式顯示設備的交互方法及裝置。

背景技術

虛擬現實(Virtual Reality，VR)技術通過計算機系統模擬出虛擬的三維世界，借助顯示系統和交互系統，向使用者提供視覺、聽覺、觸覺等感官的模擬體驗，同時使用者能夠與虛擬場景進行互動交互，帶給使用者身臨其境的感受。因此，交互技術是虛擬現實系統實現的關鍵性技術之一，決定了使用者如何在虛擬世界中與目標進行互動。

現有技術方案中，頭戴式顯示設備通過檢測使用者的頭部動作，控制顯示內容切換、光標或錨點移動等，從而完成視角轉換、菜單選擇或內容輸入等基礎的交互操作。然而，基于頭部運動檢測的交互操作方式，用戶操作的復雜度高，操作精度低，無法適用于要求高精度、低時延的交互操作場景中。

發明內容

本發明的目的是提供一種基于頭戴式顯示設備的交互方法及裝置，配合手持式外設，降低頭戴式顯示設備使用者進行交互操作的復雜度，提高交互操作效率。

有鑒于此，本發明一方面提供一種基于頭戴式顯示設備的交互方法，包括以下步驟：獲取全景圖像；連接頭戴式顯示設備與手持式外設，確定所述手持式外設在所述全景圖像對應的空間坐標系中的坐標；根據所述手持式外設在所述空間坐標系中的坐標，在所述頭戴式顯示設備的顯示界面中顯示所述手持式外設對應的標識。

優選地，所述根據所述手持式外設在所述空間坐標系中的坐標，在所述頭戴式顯示設備的顯示界面中顯示所述手持式外設對應的標識的步驟之前，還包括：根據所述手持式外設的姿態確定所述手持式外設在所述全景圖像上的虛擬投影點。

優選地，所述根據所述手持式外設在所述空間坐標系中的坐標，在所述頭戴式顯示設備的顯示界面中顯示所述手持式外設對應的標識的步驟，具體為：獲取所述手持式外設的虛擬投影點在所述全景圖像對應的空間坐標系中的坐標；根據所述頭戴式顯示設備當前顯示界面中顯示的全景圖像區域對應的坐標區間，判斷所述虛擬投影點坐標是否位于所述坐標區間內；若是，在所述頭戴式顯示設備的顯示界面中，顯示連接所述手持式外設坐標與所述虛擬投影點坐標的標識線。

優選地，所述在所述頭戴式顯示設備的顯示界面中，顯示連接所述手持式外設坐標與所述虛擬投影點坐標的標識線的步驟，具體為：當檢測到所述手持式外設的第一端指向所述頭戴式顯示設備當前顯示界面中顯示的全景圖像區域時，在所述頭戴式顯示設備的顯示界面中，顯示連接所述手持式外設坐標與所述虛擬投影點坐標的第一標識線；以及，當檢測到所述手持式外設的第二端指向所述頭戴式顯示設備當前顯示界面中顯示的全景圖像區域時，在所述頭戴式顯示設備的顯示界面中，顯示連接所述手持式外設坐標與所述虛擬投影點坐標的第二標識線。

優選地，所述第一標識線為實線，所述第二標識線為虛線。

本發明另一方面提供一種基于頭戴式顯示設備的交互裝置，包括：圖像獲取模塊：用于獲取全景圖像；外設連接模塊：用于連接頭戴式顯示設備與手持式外設；坐標確定模塊：用于確定所述手持式外設在所述全景圖像對應的空間坐標系中的坐標；標識顯示模塊：用于根據所述手持式外設在所述空間坐標系中的坐標，在所述頭戴式顯示設備的顯示界面中顯示所述手持式外設對應的標識。