[發明專利]手勢識別方法及相關裝置

在審

• 申請號: 202010765829.6
• 申請日: 2020-07-31
• 公開（公告）號: CN111881862A
• 公開（公告）日: 2020-11-03
• 發明（設計）人: 崔永明
• 申請（專利權）人: OPPO廣東移動通信有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06F1/3234
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 熊永強

1.一種手勢識別方法，其特征在于，應用于電子設備，所述方法包括：

以第一采樣模式采集第一圖像組，所述第一采樣模式包括第一功率的采樣模式；

確定所述第一圖像組的圖像種類，所述圖像種類包括手勢圖像和非手勢圖像；

在所述圖像種類符合預設種類條件時，以第二采樣模式采集第二圖像組，得到手勢識別數據，所述第二采樣模式包括第二功率的采樣模式，所述第二功率大于所述第一功率。

2.根據權利要求1所述的方法，其特征在于，所述確定所述第一圖像組的圖像種類，包括：

將所述第一圖像組輸入訓練好的手勢識別模型，根據所述訓練好的手勢識別模型的輸出確定所述第一圖像組的圖像種類。

3.根據權利要求2所述的方法，其特征在于，所述在所述圖像種類符合預設種類條件時，以第二采樣模式采集第二圖像組，得到手勢識別數據，包括：

當所述圖像種類為手勢圖像時，將所述第一采樣模式切換為第二采樣模式實時采集當前圖像得到所述第二圖像組；

將所述第二圖像組輸入所述訓練好的手勢識別模型，根據所述手勢識別模型的輸出確定所述第二圖像組的所述手勢識別數據。

4.根據權利要求2所述的方法，其特征在于，所述訓練好的手勢識別模型包括特征提取模塊、分類模塊；所述將所述第一圖像組輸入訓練好的手勢識別模型，根據所述訓練好的手勢識別模型的輸出確定所述第一圖像組的圖像種類，包括：

將所述第一圖像組輸入所述特征提取模塊，根據所述特征提取模塊的輸出確定所述第一圖像組中每張圖像的特征數據；

將所述每張圖像的特征數據輸入所述分類模塊，根據所述分類模塊的輸出確定所述第一圖像組在每種預設手勢種類下的手勢種類分數；

當存在大于預設分數閾值的所述手勢種類分數時，確定所述第一圖像組的圖像種類為所述手勢圖像；

當不存在大于所述預設分數閾值的所述手勢種類分數時，確定所述第一圖像組的圖像種類為所述非手勢圖像。

5.根據權利要求1～4任一項所述的方法，其特征在于，

所述第一采樣模式包括第一采樣幀率的采樣模式，所述第二采樣模式包括第二采樣幀率的采樣模式，此時所述第一采樣幀率小于所述第二采樣幀率；或，

所述第一采樣模式包括第一采樣分辨率的采樣模式，所述第二采樣模式包括第二采樣分辨率的采樣模式，此時所述第一采樣分辨小于所述第二采樣分辨率；或，

所述第一采樣模式包括所述第一采樣幀率和所述第一采樣分辨率的采樣模式，所述第二采樣模式包括所述第二采樣幀率和所述第二采樣分辨率的采樣模式，此時所述第一采樣幀率小于所述第二采樣幀率且所述第一采樣分辨小于所述第二采樣分辨率。

6.根據權利要求1所述的方法，其特征在于，所述在所述圖像種類符合預設種類條件時，以第二采樣模式采集第二圖像組，得到手勢識別數據，包括：

獲取當前的光照數據；

在所述光照數據符合預設光照條件時，以預設采樣幀率和預設分辨率采集所述第二圖像組，得到所述手勢識別數據；

在所述光照數據不符合所述預設光照條件時，以動態采樣幀率和動態分辨率采集所述第二圖像組，得到所述手勢識別數據。

7.根據權利要求1～3任一項所述的方法，其特征在于，所述以第一采樣模式獲取第一圖像組，確定所述第一圖像組的圖像種類之前，所述方法還包括：

建立基礎手勢識別模型；

采用第一損失函數softmax loss和第二損失函數focal loss聯合訓練所述基礎手勢識別模型，得到所述訓練好的手勢識別模型。