[發明專利]關鍵點定位方法、裝置、電子設備和存儲介質

有效

• 申請號: 201911044546.6
• 申請日: 2019-10-30
• 公開（公告）號: CN110807410B
• 公開（公告）日: 2022-09-06
• 發明（設計）人: 沈輝;高原;張演龍;孫昊;劉霄;文石磊;丁二銳
• 申請（專利權）人: 北京百度網訊科技有限公司
• 主分類號: G06V40/10
• 分類號: G06V40/10;G06V10/46;G06V10/82;G06N3/04;G06N3/08
• 代理公司: 北京市鑄成律師事務所 11313
• 代理人: 楊瑾瑾;王一

1.一種關鍵點定位方法，其特征在于，包括：

獲取當前幀包括的至少一個手部區域；

利用關鍵點檢測模型對所述當前幀的各手部區域進行關鍵點檢測，得到所述當前幀的各手部區域包括的各關鍵點的預測位置；

對所述當前幀的各手部區域包括的各關鍵點的預測位置進行平滑處理，得到所述當前幀的各關鍵點的定位結果；

其中，所述對所述當前幀的各手部區域包括的各關鍵點的預測位置進行平滑處理，得到所述當前幀的各關鍵點的定位結果，包括：

對所述當前幀與所述當前幀的前n幀的預測位置進行加權平均，得到所述當前幀的平均位置；

在所述當前幀相對于前一幀的位移大于設定閾值的情況下，則將當前幀的定位結果確定為所述當前幀的預測位置；

在所述當前幀相對于前一幀的位移小于或等于設定閾值的情況下，則將當前幀的定位結果確定為所述當前幀的前一幀的預測位置；

所述獲取當前幀包括的至少一個手部區域，包括：

在需要更新手部區域的情況下，利用手部區域檢測模型對所述當前幀進行手部檢測，所述手部區域檢測模型是根據輕量級神經網絡模型、特征金字塔網絡模型和目標檢測模型得到的；

還包括：

判斷當前幀是否需要更新手部區域；

在滿足檢測條件的情況下，所述當前幀需要更新手部區域；

其中，所述檢測條件包括以下至少一種：

所述當前幀為待檢測視頻的第一幀；

所述當前幀之前幀的手部區域的數目變化；

所述當前幀距離上一次利用手部區域檢測模型進行手部檢測的幀之間的差值達到設定閾值。

2.根據權利要求1所述的方法，其特征在于，獲取當前幀包括的至少一個手部區域，包括：

在無需更新手部區域的情況下，利用跟蹤算法獲取當前幀包括的至少一個手部區域。

3.根據權利要求2所述的方法，其特征在于，利用跟蹤算法獲取當前幀包括的至少一個手部區域，包括：

獲取所述當前幀的前一幀的至少一個手部區域；

對所述前一幀的各手部區域進行擴大處理，得到所述當前幀的各手部區域。

4.根據權利要求1所述的方法，其特征在于，所述關鍵點檢測模型是根據輕量級神經網絡模型和沙漏模型得到的。

5.根據權利要求1所述的方法，其特征在于，所述關鍵點檢測模型還輸出所述當前幀的各手部區域包括的各關鍵點的預測位置的置信度，所述方法還包括：

計算所述當前幀的各手部區域的各關鍵點的置信度的平均值，得到所述當前幀的各手部區域對應的置信度；

將對應的置信度低于目標閾值的手部區域判定為誤檢；

將所述當前幀中被判定為誤檢的手部區域過濾掉。

6.根據權利要求1所述的方法，其特征在于，對所述當前幀的各手部區域包括的各關鍵點的預測位置進行平滑處理，得到所述當前幀的各關鍵點的定位結果，包括：

對所述當前幀與其前n幀的預測位置進行時域高斯平滑，得到所述當前幀的各關鍵點的定位結果，n為正整數。