[發明專利]一種基于虛擬鍵盤的虛擬場景交互方法、裝置和電子設備

有效

• 申請號: 201910840364.3
• 申請日: 2019-09-06
• 公開（公告）號: CN110568929B
• 公開（公告）日: 2023-04-25
• 發明（設計）人: 唐溢辰
• 申請（專利權）人: 諾百愛（杭州）科技有限責任公司
• 主分類號: G06F3/01
• 分類號: G06F3/01
• 代理公司: 上海點威知識產權代理有限公司 31326
• 代理人: 胡志強

本申請提供一種基于虛擬鍵盤的虛擬場景交互方法，顯示虛擬場景和對所述虛擬場景進行操作的虛擬手，獲取手部動作在手臂處產生的肌電信號，識別肌電信號對應的手勢，根據識別到的所述手勢同步調整所述虛擬手的手勢，在虛擬手的手勢滿足預設條件時，虛擬場景響應虛擬手的操作。根據手部動作在手臂處產生的肌電信號識別手部動作，來同步調整虛擬手的手勢，使得在虛擬場景中完成虛擬手與真實手部的同步，而在虛擬手的手勢滿足一定條件時，表示真實手部完成了交互動作，這時的手勢可以觸發虛擬場景進行響應，此時，虛擬場景響應虛擬手的操作，便可以準確地進行交互，從而提高了虛擬場景的交互體驗。

技術領域

本申請涉及計算機領域，尤其涉及一種基于虛擬鍵盤的虛擬場景交互方法、裝置和電子設備。

背景技術

隨著虛擬技術的發展，虛擬現實和增強現實為人們所知(比如VR眼鏡、AR眼鏡)，虛擬現實和增強現實都是為用戶展示虛擬的畫面，營造虛擬的場景。

而在利用虛擬技術進行交互時，則不僅需要展示虛擬畫面，還需要對虛擬環境進行操控，來顯示交互的結果。

現有技術對虛擬環境的操控，通常是利用手柄、手套，或基于攝像頭的視覺方案來讀取或識別相關位置信息，從而達到操控的目的。前兩種方案是通過手持或佩戴第三方工具來進行交互，未解放雙手；第三種方案受到場景及光線的限制，體驗較差。

發明內容

本說明書實施例提供一種基于虛擬鍵盤的虛擬場景交互方法、裝置和電子設備，用以解決現有技術中虛擬場景交互體驗差的問題。

本申請提供一種基于虛擬鍵盤的虛擬場景交互方法，包括：

顯示虛擬場景和對所述虛擬場景進行操作的虛擬手；

獲取肌電信號，所述肌電信號為手部動作在手臂處產生的肌電信號；

識別所述肌電信號對應的手勢；

根據識別到的所述手勢同步調整所述虛擬手的手勢，使所述虛擬手對所述虛擬場景進行操作；

在所述虛擬手的手勢滿足預設條件時，所述虛擬場景響應所述虛擬手的操作。

可選地，所述虛擬場景中具有虛擬鍵盤；

所述在所述虛擬手的手勢滿足預設條件時，所述虛擬場景響應所述虛擬手的操作，包括：

在所述虛擬手與所述虛擬鍵盤中的預設位置接觸時，根據接觸的位置進行信息的錄入。

可選地，所述虛擬場景中具有顯示的圖像；

所述在所述虛擬手的手勢滿足預設條件時，所述虛擬場景響應所述虛擬手的操作，包括：

在所述虛擬手接觸到所述圖像并進行顯示狀態調整操作時，調整所述圖像的顯示狀態，所述顯示狀態調整操作包括滑動、縮放中的至少一個。

可選地，所述獲取肌電信號，包括：

獲取從多個通道提取的肌電信號；

所述識別所述肌電信號對應的手勢，包括：

根據多個通道的肌電信號組合的整體特征識別對應的手勢。

可選地，在所述根據多個通道的肌電信號組合的整體特征識別對應的手勢之前，還包括：

對各通道的肌電信號分別進行整流、濾波和歸一化處理，得到處理后的肌電信號。

可選地，在顯示虛擬場景和對所述虛擬場景進行操作的虛擬手之前，還可以包括：

校正虛擬手在虛擬場景中的位置。

可選地，所述獲取肌電信號，包括：

獲取在預設時刻采集的肌電信號。