[發明專利]手部關鍵點檢測的方法、設備和計算機設備

在審

• 申請號: 202010211811.1
• 申請日: 2020-03-24
• 公開（公告）號: CN111523387A
• 公開（公告）日: 2020-08-11
• 發明（設計）人: 林健;周志敏;劉海偉;叢林
• 申請（專利權）人: 杭州易現先進科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/32;G06K9/46;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 杭州華進聯浙知識產權代理有限公司 33250
• 代理人: 金無量

1.一種手部關鍵點檢測的方法，其特征在于，所述方法包括：

獲取圖像集合，根據所述圖像集合中手部關鍵點的真實位置標簽，生成所述手部關鍵點的掩碼，其中，所述手部關鍵點分類為指尖點和掌心點；

根據所述圖像集合的特征圖，解析所述手部關鍵點的關鍵點識別信息，根據所述掩碼和所述關鍵點識別信息，得到所述手部關鍵點的預測位置標簽值；

根據所述預測位置標簽值和所述真實位置標簽，對所述手部關鍵點進行損失函數回歸，得到手部關鍵點檢測模型，通過所述手部關鍵點檢測模型進行手部關鍵點檢測。

2.根據權利要求1所述的手部關鍵點檢測的方法，其特征在于，所述得到所述手部關鍵點的預測位置標簽值包括：

通過所述手部關鍵點的絕對位置信息，調整所述預測位置標簽值。

3.根據權利要求2所述的手部關鍵點檢測的方法，其特征在于，獲取所述手部關鍵點的絕對位置信息包括：

由網格圖得到所述絕對位置信息，其中，所述網格圖提供網格點坐標。

4.根據權利要求2所述的手部關鍵點檢測的方法，其特征在于，獲取所述手部關鍵點的絕對位置信息包括：

由偏移圖得到所述絕對位置信息，其中，根據所述偏移圖與所述預測位置標簽值的乘積，調整所述預測位置標簽值。

5.根據權利要求1所述的手部關鍵點檢測的方法，其特征在于，所述通過所述手部關鍵點檢測模型進行手部關鍵點檢測包括：

通過所述手部關鍵點模型，獲取待檢測圖像的掌心點和指尖點；

以所述掌心點為基準，根據所述掌心點和所述指尖點的標簽值，將所述掌心點與所述指尖點進行聚合，其中，所述掌心點與所述指尖點的標簽值對應。

6.根據權利要求1所述的手部關鍵點檢測的方法，其特征在于，所述根據所述圖像集合中手部關鍵點的真實位置標簽，生成所述手部關鍵點的掩碼包括：

根據所述圖像集合中的手部數量，確定掩碼參數，根據所述手部關鍵點的真實位置標簽，對每個手部的前景和背景進行區分，得到手部掩碼；

根據所述掩碼參數和所述手部掩碼，得到所述圖像集合的手部關鍵點的掩碼。

7.根據權利要求1所述的手部關鍵點檢測的方法，其特征在于，所述對所述手部關鍵點進行損失函數回歸包括：

根據所述掩碼中的掌心點信息，對所述預測位置標簽值進行篩選，保留包括手部的圖像數據；

根據所述手部的預測位置標簽值的均值和所述關鍵點標簽值的均值，對所述圖像數據進行損失函數回歸。

8.一種手部關鍵點檢測的設備，其特征在于，所述設備包括生成模塊、預測模塊和回歸模塊：

所述生成模塊，用于獲取圖像集合，根據所述圖像集合中手部關鍵點的真實位置標簽，生成所述手部關鍵點的掩碼，其中，所述手部關鍵點分類為指尖點和掌心點；

所述預測模塊，用于根據所述圖像集合的特征圖，解析所述手部關鍵點的關鍵點識別信息，根據所述掩碼和所述關鍵點識別信息，得到所述手部關鍵點的預測位置標簽值；

所述回歸模塊，用于根據所述預測位置標簽值和所述真實位置標簽，對所述手部關鍵點進行損失函數回歸，得到手部關鍵點檢測模型，通過所述手部關鍵點檢測模型進行手部關鍵點檢測。

9.根據權利要求8所述的手部關鍵點檢測的設備，其特征在于，所述預測模塊包括調整單元：

所述調整單元，用于通過所述手部關鍵點的絕對位置信息，調整所述預測位置標簽值。

10.一種計算機設備，包括存儲器和處理器，所述存儲器存儲有計算機程序，其特征在于，所述處理器執行所述計算機程序時實現權利要求1至7中任一項所述方法的步驟。

11.一種計算機可讀存儲介質，其上存儲有計算機程序，其特征在于，所述計算機程序被處理器執行時實現權利要求1至7中任一項所述的方法的步驟。