[發明專利]頭戴式顯示設備的界面元素控制方法及裝置

在審

• 申請號: 202110342716.X
• 申請日: 2021-03-30
• 公開（公告）號: CN113190110A
• 公開（公告）日: 2021-07-30
• 發明（設計）人: 吳濤
• 申請（專利權）人: 青島小鳥看看科技有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06F3/0481;G06F3/0487;G06T17/00
• 代理公司: 北京博雅睿泉專利代理事務所(特殊普通合伙) 11442
• 代理人: 吳秀娥

本公開涉及一種頭戴式顯示設備的界面元素控制方法、裝置、頭戴式顯示設備及計算機可讀存儲介質。頭戴式顯示設備包括用于攝取目標區域的目標圖像的至少一個相機以及顯示界面，目標圖像顯示在顯示界面中；該方法包括：獲取至少一個相機攝取的目標圖像；在目標圖像的圖像內容包括至少一個手腕的情況下，根據目標圖像確定至少一個手腕是否滿足預設條件；其中，預設條件包括：手腕處于靜止狀態；若確定結果為是，在顯示界面中確定以目標手腕為中心的目標顯示區域；其中，目標手腕為至少一個手腕中的一個；在目標顯示區域中顯示當前場景下的至少一個界面元素，以便在根據用戶的手勢確定用戶選中的界面元素后，將該界面元素對應的信息作為輸入信息。

技術領域

本公開實施例涉及虛擬現實技術領域，更具體地，涉及一種頭戴式顯示設備的界面元素控制方法、裝置、頭戴式顯示設備及計算機可讀存儲介質。

背景技術

頭戴式顯示設備(Head Mounted Display，HMD)是一種可以穿戴在用戶頭部的顯示設備，能夠實現虛擬現實(Virtual Reality，VR)、增強現實(Augmented Reality，AR)和混合現實(Mixed Reality，MR)等不同效果。

HMD在使用時會使用戶的頭部或者眼睛會處于封閉環境，以使用戶能夠沉浸在虛擬環境中。為了展示AR和MR中的現實內容，HMD上還會安裝至少一個彩色相機，以便通過至少一個彩色相機攝取現實世界中的現實圖像并將其投影至人眼，從而模擬用戶直接看外部的三維物理空間環境。HMD通過其上的顯示界面顯示經過疊加處理的現實圖像和虛擬圖像。

HMD的顯示界面中還可以向用戶呈現可選擇和/或可操作的界面元素，例如用戶界面(User Interface，UI)元素、用戶圖形界面(Graphical User Interface，GUI)元素等，以便用戶可以通過手勢與上述界面元素進行交互。目前，隨著HMD應用領域的增多(例如娛樂領域、醫療領域、教育領域、工業領域等)，HMD的顯示界面中能夠顯示多種多樣的虛擬現實場景(或增強現實場景或混合現實場景)，界面元素顯示在顯示界面中預先設定的位置處。

發明內容

本公開實施例的一個目的是提供一種頭戴式顯示設備的界面元素控制的新的技術方案。

根據本公開的第一方面，提供了一種頭戴式顯示設備的界面元素控制方法，頭戴式顯示設備包括用于攝取目標區域的目標圖像的至少一個相機、以及顯示界面，目標圖像顯示在顯示界面中；該方法包括：獲取至少一個相機攝取的目標圖像；在目標圖像的圖像內容包括至少一個手腕的情況下，根據目標圖像確定至少一個手腕是否滿足預設條件；其中，預設條件包括：手腕處于靜止狀態；若確定結果為是，在顯示界面中確定以目標手腕為中心的目標顯示區域；其中，目標手腕為至少一個手腕中的一個；在目標顯示區域中顯示當前場景下的至少一個界面元素，以便在根據用戶的手勢確定用戶選中的界面元素后，將該界面元素對應的信息作為輸入信息。

可選地，預設條件還包括：手腕的姿態為預設姿態。

可選地，預設姿態包括：手腕的內側朝向頭戴式顯示設備；其中，手腕的內側與手掌掌心位于同一側。

可選地，至少一個手腕包括多個手腕；在顯示界面中確定以目標手腕為中心的目標顯示區域之前，該方法還包括：根據目標圖像在多個手腕中確定預設手腕；其中，預設手腕包括：左手腕或者右手腕；將預設手腕作為目標手腕。

可選地，手勢為目標圖像中的目標手做出的手勢，目標手的手腕為目標手腕或者非目標手腕。

可選地，至少一個界面元素包括以下中的一個或多個：窗口、對話框、菜單、滾動條和圖形符號。

可選地，至少一個相機包括兩個相機，兩個相機分別設置在兩個人眼位置處。