[發明專利]一種手部追蹤方法及裝置

有效

• 申請號: 201910359991.5
• 申請日: 2019-04-30
• 公開（公告）號: CN110334576B
• 公開（公告）日: 2021-09-24
• 發明（設計）人: 孫晨;陳文科;高源;姚聰
• 申請（專利權）人: 北京曠視科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00
• 代理公司: 北京鉦霖知識產權代理有限公司 11722
• 代理人: 李志新;李靜波

1.一種手部追蹤方法，其中，包括：

獲取視頻幀步驟，獲取連續的視頻幀，包括前一視頻幀和當前視頻幀；

判斷步驟，根據所述前一視頻幀中是否有手部圖像的標注，判斷所述前一視頻幀中是否檢測到手部圖像；

單尺度局部檢測步驟，當判斷所述前一視頻幀中具有所述手部圖像，則通過單尺度局部檢測對所述當前視頻幀的局部范圍進行手部檢測，并在所述當前視頻幀中標注檢測到的一個或多個所述手部圖像在所述當前視頻幀中的位置，所述單尺度局部檢測用于檢測尺度為固定范圍內的手部圖像；

多尺度全局檢測步驟，當判斷所述前一視頻幀中不具有所述手部圖像，則通過多尺度全局檢測對所述當前視頻幀全圖范圍進行手部檢測，并在所述當前視頻幀中標注檢測到的一個或多個所述手部圖像在所述當前視頻幀中的位置，所述多尺度全局 檢測用于同時檢測多種尺度范圍內的手部圖像。

2.根據權利要求1所述的方法，其中，所述方法還包括：

選擇主體手部圖像步驟，基于所述單尺度局部檢測步驟或所述多尺度全局檢測步驟檢測到的一個或多個所述手部圖像，選擇其中一個所述手部圖像作為主體手部圖像，并刪除其余所述手部圖像的標注。

3.根據權利要求2所述的方法，其中，所述選擇主體手部圖像步驟還包括：根據多個所述手部圖像在所述當前視頻幀中的面積大小，選擇面積最大的所述手部圖像作為所述主體手部圖像。

4.根據權利要求2所述的方法，其中，所述選擇主體手部圖像步驟還包括：選擇所述視頻幀中與預設手勢匹配相同的所述手部圖像作為所述主體手部圖像。

5.根據權利要求1至4任一項所述的方法，其中，所述方法還包括：手部識別步驟，基于所述當前視頻幀中的一個或多個所述手部圖像，判斷所述手部圖像是否為真實的手，如判斷為不是真實的手，則刪除所述手部圖像的標注。

6.根據權利要求5所述的方法，其中，所述手部識別步驟還包括：根據所述手部圖像的所述位置，對所述當前視頻幀進行截取，得到截取圖像，對所述截取圖像縮放至一固定的識別尺寸范圍內進行判斷。

7.根據權利要求1所述的方法，其中，所述單尺度局部檢測步驟還包括：基于所述前一視頻幀中所述手部圖像的位置，對所述當前視頻幀進行擴大截取，獲取所述局部范圍的局部圖像，在所述局部圖像中進行所述手部檢測。

8.根據權利要求7所述的方法，其中，所述單尺度局部檢測步驟還包括：對所述局部圖像進行縮放至一固定的檢測尺寸范圍內進行所述手部檢測。

9.一種手部追蹤裝置，其中，包括：

獲取視頻幀模塊，用于獲取連續的視頻幀，包括前一視頻幀和當前視頻幀；

判斷模塊，用于根據所述前一視頻幀中是否有手部圖像的標注，判斷所述前一視頻幀中是否檢測到手部圖像；

單尺度局部檢測模塊，用于當判斷所述前一視頻幀中具有所述手部圖像，則通過單尺度局部檢測對所述當前視頻幀的局部范圍進行手部檢測，并在所述當前視頻幀中標注檢測到的一個或多個所述手部圖像在所述當前視頻幀的位置，所述單尺度局部檢測用于檢測尺度為固定范圍內的手部圖像；

多尺度全局檢測模塊，用于當判斷所述前一視頻幀中不具有所述手部圖像，則通過多尺度全局檢測對所述當前視頻幀全圖范圍進行手部檢測，并在所述當前視頻幀中標注檢測到的一個或多個所述手部圖像在所述當前視頻幀的位置，所述多尺度全局 檢測用于同時檢測多種尺度范圍內的手部圖像。

10.一種電子設備，其中，所述電子設備包括：

存儲器，用于存儲指令；以及

處理器，用于調用所述存儲器存儲的指令執行權利要求1-8中任一項所述的手部追蹤方法。

11.一種計算機可讀存儲介質，其中，所述計算機可讀存儲介質存儲有計算機可執行指令，所述計算機可執行指令在由處理器執行時，執行權利要求1-8中任一項所述的手部追蹤方法。