[發(fā)明專利]一種基于虛擬鍵盤的虛擬場景交互方法、裝置和電子設(shè)備

有效

• 申請?zhí)枺?/td>: 201910840364.3
• 申請日: 2019-09-06
• 公開（公告）號: CN110568929B
• 公開（公告）日: 2023-04-25
• 發(fā)明（設(shè)計）人: 唐溢辰
• 申請（專利權(quán)）人: 諾百愛（杭州）科技有限責(zé)任公司
• 主分類號: G06F3/01
• 分類號: G06F3/01
• 代理公司: 上海點威知識產(chǎn)權(quán)代理有限公司 31326
• 代理人: 胡志強

1.一種基于虛擬鍵盤的虛擬場景交互方法，包括：

顯示虛擬場景和對所述虛擬場景進行操作的虛擬手；

根據(jù)手勢變化的速度實時調(diào)整預(yù)設(shè)時刻，獲取在預(yù)設(shè)時刻采集的肌電信號，所述肌電信號佩戴在手臂處的臂環(huán)所檢測到的肌電信號；

識別所述肌電信號對應(yīng)的手勢；

根據(jù)識別到的所述手勢同步調(diào)整所述虛擬手的手勢，使所述虛擬手對所述虛擬場景進行操作；

在所述虛擬手的手勢滿足預(yù)設(shè)條件時，所述虛擬場景響應(yīng)所述虛擬手的操作；

所述虛擬場景中具有虛擬鍵盤；

所述在所述虛擬手的手勢滿足預(yù)設(shè)條件時，所述虛擬場景響應(yīng)所述虛擬手的操作，包括：

在所述虛擬手與所述虛擬鍵盤中的預(yù)設(shè)位置接觸時，根據(jù)接觸的位置進行信息的錄入；

所述虛擬場景中具有虛擬現(xiàn)實眼鏡；

用戶通過所述虛擬現(xiàn)實眼鏡顯示的所述虛擬手和虛擬鍵盤的位置關(guān)系，判斷敲擊所述虛擬鍵盤中特定的鍵所需要移動的距離，所述虛擬手同步真實手部的動作對所述虛擬鍵盤進行敲擊操作，所述虛擬眼鏡獲取并識別所述敲擊操作產(chǎn)生的肌電信號，得到所述敲擊操作產(chǎn)生的肌電信號所對應(yīng)的手勢，并進行響應(yīng)；根據(jù)眼鏡中內(nèi)置的輸入法獲取所述敲擊操作所輸入的信息，同時，所述虛擬場景中同步顯示所述虛擬手敲擊虛擬鍵盤的手勢進行打字。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述虛擬場景中具有顯示的圖像；

所述在所述虛擬手的手勢滿足預(yù)設(shè)條件時，所述虛擬場景響應(yīng)所述虛擬手的操作，包括：

在所述虛擬手接觸到所述圖像并進行顯示狀態(tài)調(diào)整操作時，調(diào)整所述圖像的顯示狀態(tài)，所述顯示狀態(tài)調(diào)整操作包括滑動、縮放中的至少一個。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述獲取肌電信號，包括：

獲取從多個通道提取的肌電信號；

所述識別所述肌電信號對應(yīng)的手勢，包括：

根據(jù)多個通道的肌電信號組合的整體特征識別對應(yīng)的手勢。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，在所述根據(jù)多個通道的肌電信號組合的整體特征識別對應(yīng)的手勢之前，還包括：

對各通道的肌電信號分別進行整流、濾波和歸一化處理，得到處理后的肌電信號。

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，在顯示虛擬場景和對所述虛擬場景進行操作的虛擬手之前，還可以包括：

校正虛擬手在虛擬場景中的位置。

6.一種基于虛擬鍵盤的虛擬場景交互裝置，包括：

顯示模塊，用于顯示虛擬場景和對所述虛擬場景進行操作的虛擬手；

獲取模塊，用于根據(jù)手勢變化的速度實時調(diào)整預(yù)設(shè)時刻，獲取在預(yù)設(shè)時刻采集的肌電信號，所述肌電信號為佩戴在手臂處的臂環(huán)所檢測到的肌電信號；

交互模塊，用于識別所述肌電信號對應(yīng)的手勢；

根據(jù)識別到的所述手勢同步調(diào)整所述虛擬手的手勢，使所述虛擬手對所述虛擬場景進行操作；

在所述虛擬手的手勢滿足預(yù)設(shè)條件時，所述虛擬場景響應(yīng)所述虛擬手的操作；

所述虛擬場景中具有虛擬鍵盤；

所述在所述虛擬手的手勢滿足預(yù)設(shè)條件時，所述虛擬場景響應(yīng)所述虛擬手的操作，包括：

在所述虛擬手與所述虛擬鍵盤中的預(yù)設(shè)位置接觸時，根據(jù)接觸的位置進行信息的錄入；

所述虛擬場景中具有虛擬現(xiàn)實眼鏡；

用戶通過所述虛擬現(xiàn)實眼鏡顯示的所述虛擬手和虛擬鍵盤的位置關(guān)系，判斷敲擊所述虛擬鍵盤中特定的鍵所需要移動的距離，所述虛擬手同步真實手部的動作對所述虛擬鍵盤進行敲擊操作，所述虛擬眼鏡獲取并識別所述敲擊操作產(chǎn)生的肌電信號，得到所述敲擊操作產(chǎn)生的肌電信號所對應(yīng)的手勢，并進行響應(yīng)；根據(jù)眼鏡中內(nèi)置的輸入法獲取所述敲擊操作所輸入的信息，同時，所述虛擬場景中同步顯示所述虛擬手敲擊虛擬鍵盤的手勢進行打字。

7.根據(jù)權(quán)利要求6所述的裝置，其特征在于，所述虛擬場景中具有顯示的圖像；

所述交互模塊，用于在所述虛擬手接觸到所述圖像并進行顯示狀態(tài)調(diào)整操作時，調(diào)整所述圖像的顯示狀態(tài)，所述顯示狀態(tài)調(diào)整操作包括滑動、縮放中的至少一個。