[發(fā)明專利]一種基于虛擬鍵盤的虛擬場景交互方法、裝置和電子設(shè)備

有效

• 申請?zhí)枺?/td>: 201910840364.3
• 申請日: 2019-09-06
• 公開（公告）號: CN110568929B
• 公開（公告）日: 2023-04-25
• 發(fā)明（設(shè)計）人: 唐溢辰
• 申請（專利權(quán)）人: 諾百愛（杭州）科技有限責任公司
• 主分類號: G06F3/01
• 分類號: G06F3/01
• 代理公司: 上海點威知識產(chǎn)權(quán)代理有限公司 31326
• 代理人: 胡志強

本申請?zhí)峁┮环N基于虛擬鍵盤的虛擬場景交互方法，顯示虛擬場景和對所述虛擬場景進行操作的虛擬手，獲取手部動作在手臂處產(chǎn)生的肌電信號，識別肌電信號對應的手勢，根據(jù)識別到的所述手勢同步調(diào)整所述虛擬手的手勢，在虛擬手的手勢滿足預設(shè)條件時，虛擬場景響應虛擬手的操作。根據(jù)手部動作在手臂處產(chǎn)生的肌電信號識別手部動作，來同步調(diào)整虛擬手的手勢，使得在虛擬場景中完成虛擬手與真實手部的同步，而在虛擬手的手勢滿足一定條件時，表示真實手部完成了交互動作，這時的手勢可以觸發(fā)虛擬場景進行響應，此時，虛擬場景響應虛擬手的操作，便可以準確地進行交互，從而提高了虛擬場景的交互體驗。

技術(shù)領(lǐng)域

本申請涉及計算機領(lǐng)域，尤其涉及一種基于虛擬鍵盤的虛擬場景交互方法、裝置和電子設(shè)備。

背景技術(shù)

隨著虛擬技術(shù)的發(fā)展，虛擬現(xiàn)實和增強現(xiàn)實為人們所知(比如VR眼鏡、AR眼鏡)，虛擬現(xiàn)實和增強現(xiàn)實都是為用戶展示虛擬的畫面，營造虛擬的場景。

而在利用虛擬技術(shù)進行交互時，則不僅需要展示虛擬畫面，還需要對虛擬環(huán)境進行操控，來顯示交互的結(jié)果。

現(xiàn)有技術(shù)對虛擬環(huán)境的操控，通常是利用手柄、手套，或基于攝像頭的視覺方案來讀取或識別相關(guān)位置信息，從而達到操控的目的。前兩種方案是通過手持或佩戴第三方工具來進行交互，未解放雙手；第三種方案受到場景及光線的限制，體驗較差。

發(fā)明內(nèi)容

本說明書實施例提供一種基于虛擬鍵盤的虛擬場景交互方法、裝置和電子設(shè)備，用以解決現(xiàn)有技術(shù)中虛擬場景交互體驗差的問題。

本申請?zhí)峁┮环N基于虛擬鍵盤的虛擬場景交互方法，包括：

顯示虛擬場景和對所述虛擬場景進行操作的虛擬手；

獲取肌電信號，所述肌電信號為手部動作在手臂處產(chǎn)生的肌電信號；

識別所述肌電信號對應的手勢；

根據(jù)識別到的所述手勢同步調(diào)整所述虛擬手的手勢，使所述虛擬手對所述虛擬場景進行操作；

在所述虛擬手的手勢滿足預設(shè)條件時，所述虛擬場景響應所述虛擬手的操作。

可選地，所述虛擬場景中具有虛擬鍵盤；

所述在所述虛擬手的手勢滿足預設(shè)條件時，所述虛擬場景響應所述虛擬手的操作，包括：

在所述虛擬手與所述虛擬鍵盤中的預設(shè)位置接觸時，根據(jù)接觸的位置進行信息的錄入。

可選地，所述虛擬場景中具有顯示的圖像；

所述在所述虛擬手的手勢滿足預設(shè)條件時，所述虛擬場景響應所述虛擬手的操作，包括：

在所述虛擬手接觸到所述圖像并進行顯示狀態(tài)調(diào)整操作時，調(diào)整所述圖像的顯示狀態(tài)，所述顯示狀態(tài)調(diào)整操作包括滑動、縮放中的至少一個。

可選地，所述獲取肌電信號，包括：

獲取從多個通道提取的肌電信號；

所述識別所述肌電信號對應的手勢，包括：

根據(jù)多個通道的肌電信號組合的整體特征識別對應的手勢。

可選地，在所述根據(jù)多個通道的肌電信號組合的整體特征識別對應的手勢之前，還包括：

對各通道的肌電信號分別進行整流、濾波和歸一化處理，得到處理后的肌電信號。

可選地，在顯示虛擬場景和對所述虛擬場景進行操作的虛擬手之前，還可以包括：

校正虛擬手在虛擬場景中的位置。

可選地，所述獲取肌電信號，包括：

獲取在預設(shè)時刻采集的肌電信號。