[發明專利]手勢識別方法、裝置及電子設備

有效

• 申請號: 202110282827.6
• 申請日: 2021-03-16
• 公開（公告）號: CN113190107B
• 公開（公告）日: 2023-04-14
• 發明（設計）人: 吳濤
• 申請（專利權）人: 青島小鳥看看科技有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01
• 代理公司: 北京風雅頌專利代理有限公司 11403
• 代理人: 徐雅琴

本申請公開了一種手勢識別方法、裝置及電子設備，該方法包括：接收用戶在第一時刻輸入的第一手勢軌跡；將所述第一手勢軌跡輸入到目標手勢識別模型中，獲得第一手勢指令；獲取第二時刻的第二手勢指令，其中，所述第二時刻早于所述第一時刻，所述第二手勢指令由所述目標手勢識別模型根據所述用戶在所述第二時刻輸入的第二手勢軌跡預測獲得；根據所述第一手勢指令和所述第二手勢指令，獲得目標手勢指令。該方法使得電子設備可以靈活、準確的得到表示用戶意圖的目標手勢指令。

技術領域

本公開涉及手勢識別技術領域，更具體地，涉及一種手勢識別方法、裝置及一種電子設備；本申請同時還涉及一種手勢識別模型的訓練方法。

背景技術

在用戶使用虛擬現實(VR，Virtual?Reality)、增強現實(AR，Augmented?Reality)以及混合顯示(MR，Mixed?Reality)等電子設備的過程中，為增強用戶沉浸感，一般可以通過接收用戶手勢并進行手勢識別，來接收輸入指令，進而實現人機交互。

目前的電子設備在實現手勢識別時，一般是固定幾種定義手勢，并讓用戶學習這幾種手勢，以在用戶使用電子設備時，通過識別該幾種手勢，實現用戶在各個場景中的交互。

然而，在實現本申請的過程中，發明人發現，現有的基于固定定義手勢的手勢識別方法，當用戶輸入的手勢為非標準手勢或者表示特殊意圖的手勢時，可能存在識別錯誤的問題。

發明內容

本公開實施例的一個目的是提供一種用于手勢識別的新技術方案，以靈活、準確的識別用戶手勢。

根據本公開的第一方面，提供了一種手勢識別方法，該方法包括：

接收用戶在第一時刻輸入的第一手勢軌跡；

將所述第一手勢軌跡輸入到目標手勢識別模型中，獲得第一手勢指令；

獲取第二時刻的第二手勢指令，其中，所述第二時刻早于所述第一時刻，所述第二手勢指令由所述目標手勢識別模型根據所述用戶在所述第二時刻輸入的第二手勢軌跡預測獲得；

根據所述第一手勢指令和所述第二手勢指令，獲得目標手勢指令。

可選地，所述目標手勢識別模型包括第一手勢識別模型和第二手勢識別模型，所述第一手勢識別模型用于識別屬于第一類別的手勢軌跡；所述第二手勢識別模型至少用于識別屬于第二類別的手勢軌跡，以及預測用戶下一時刻的手勢指令；

所述第二手勢識別模型通過以下步驟訓練獲得：

獲取樣本數據，其中，所述樣本數據包括樣本手勢特征信息和用戶意圖信息，所述用戶意圖信息表示所述樣本手勢特征信息對應的用戶意圖；

使用所述樣本數據訓練獲得滿足預設收斂條件的所述第二手勢識別模型。

可選地，所述樣本手勢特征信息通過以下步驟獲得：

獲取任意用戶在樣本時間切片內輸入的樣本手勢軌跡；

將所述樣本手勢軌跡輸入到所述第一手勢識別模型中，獲得候選手勢指令；

根據所述候選手勢指令、所述樣本手勢軌跡和所述樣本時間切片，獲得所述樣本手勢特征信息。

可選地，所述根據所述候選手勢指令、所述樣本手勢軌跡和所述樣本時間切片，獲得所述樣本手勢特征信息，包括：

獲取與所述候選手勢指令對應的至少一個關鍵點手勢；

從所述樣本手勢軌跡中，獲取與所述關鍵點手勢對應的樣本手勢圖像；

通過提取所述樣本手勢圖像的特征信息，獲得所述樣本手勢圖像對應的特征信息；以及，

獲取所述樣本手勢圖像在所述樣本時間切片中的時間信息；