[發明專利]基于視頻數據的手勢控制方法及裝置、計算設備

有效

• 申請號: 201711477666.6
• 申請日: 2017-12-29
• 公開（公告）號: CN108181989B
• 公開（公告）日: 2020-11-20
• 發明（設計）人: 熊超
• 申請（專利權）人: 北京奇虎科技有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01
• 代理公司: 深圳市世紀恒程知識產權代理事務所 44287
• 代理人: 胡海國

1.一種基于視頻數據的手勢控制方法，其包括：

每當獲取到跟蹤器當前輸出的與所述視頻數據相對應的跟蹤結果后，根據所述跟蹤結果確定當前跟蹤圖像幀中包含的手勢跟蹤區域；

從檢測器已輸出的與所述視頻數據相對應的各次檢測結果中獲取輸出時間最晚的檢測結果，確定所述輸出時間最晚的檢測結果中包含的手勢類型；

根據所述輸出時間最晚的檢測結果中包含的手勢類型以及所述當前跟蹤圖像幀中包含的手勢跟蹤區域確定控制規則；

向預設的智能硬件發送與所述控制規則相對應的控制指令；

所述跟蹤器每隔第一預設間隔從所述視頻數據中提取一幀圖像作為當前跟蹤圖像幀，并輸出與所述當前跟蹤圖像幀相對應的跟蹤結果；

所述檢測器每隔第二預設間隔從所述視頻數據中提取一幀圖像作為當前檢測圖像幀，并輸出與所述當前檢測圖像幀相對應的檢測結果，其中，所述第二預設間隔大于所述第一預設間隔。

2.根據權利要求1所述的方法，其中，所述根據所述輸出時間最晚的檢測結果中包含的手勢類型以及所述當前跟蹤圖像幀中包含的手勢跟蹤區域確定控制規則的步驟具體包括：

確定所述當前跟蹤圖像幀對應的前幀跟蹤圖像幀中包含的手勢跟蹤區域；

根據所述前幀跟蹤圖像幀中包含的手勢跟蹤區域以及所述當前跟蹤圖像幀中包含的手勢跟蹤區域確定手部運動軌跡；

根據所述輸出時間最晚的檢測結果中包含的手勢類型以及所述手部運動軌跡，確定對應的控制規則。

3.根據權利要求2所述的方法，其中，所述根據所述輸出時間最晚的檢測結果中包含的手勢類型以及所述手部運動軌跡，確定對應的控制規則的步驟具體包括：

查詢預設的手勢控制庫，根據所述手勢控制庫確定與所述輸出時間最晚的檢測結果中包含的手勢類型以及所述手部運動軌跡相對應的控制規則；

其中，所述手勢控制庫用于存儲與各種手勢類型和/或手部運動軌跡相對應的控制規則。

4.根據權利要求3任一所述的方法，其中，所述從檢測器已輸出的與所述視頻數據相對應的各次檢測結果中獲取輸出時間最晚的檢測結果的步驟之前，進一步包括步驟：

判斷所述當前跟蹤圖像幀中包含的手勢跟蹤區域是否為有效區域；

當判斷結果為是時，執行所述從檢測器已輸出的與所述視頻數據相對應的各次檢測結果中獲取輸出時間最晚的檢測結果的步驟及其后續步驟。

5.根據權利要求4所述的方法，其中，所述判斷所述當前跟蹤圖像幀中包含的手勢跟蹤區域是否為有效區域的步驟具體包括：

通過預設的手部分類器判斷所述當前跟蹤的圖像幀中包含的手勢跟蹤區域是否為手部區域；

若是，則確定所述當前跟蹤圖像幀中包含的手勢跟蹤區域為有效區域；若否，則確定所述當前跟蹤圖像幀中包含的手勢跟蹤區域為無效區域。

6.根據權利要求5所述的方法，其中，當所述當前跟蹤圖像幀中包含的手勢跟蹤區域為無效區域時，所述方法進一步包括：

獲取所述檢測器在所述跟蹤結果之后輸出的檢測結果，確定所述在所述跟蹤結果之后輸出的檢測結果中包含的手部檢測區域；

將所述在所述跟蹤結果之后輸出的檢測結果中包含的手部檢測區域提供給所述跟蹤器，以供所述跟蹤器根據所述在所述跟蹤結果之后輸出的檢測結果中包含的手部檢測區域輸出后續的跟蹤結果。

7.根據權利要求5任一所述的方法，其中，當所述當前跟蹤圖像幀中包含的手勢跟蹤區域為有效區域時，所述方法進一步包括：

將所述有效區域提供給所述檢測器，以供所述檢測器根據所述有效區域輸出后續的檢測結果。

8.根據權利要求7所述的方法，其中，所述檢測器根據所述有效區域輸出后續的檢測結果的步驟具體包括：

根據所述有效區域確定當前檢測圖像幀中的檢測范圍；

根據所述檢測范圍，通過神經網絡算法預測與所述當前檢測圖像幀相對應的檢測結果；

其中，所述檢測結果中包含手勢檢測區域以及手勢類型。