[發明專利]一種單目標人體關鍵點檢測方法、系統、設備及介質

在審

• 申請號: 202011102253.1
• 申請日: 2020-10-15
• 公開（公告）號: CN112232194A
• 公開（公告）日: 2021-01-15
• 發明（設計）人: 姚志強;周曦;秦勤
• 申請（專利權）人: 廣州云從凱風科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06N3/04;G06N3/08
• 代理公司: 上海光華專利事務所(普通合伙) 31219
• 代理人: 代玲

本發明提供的一種基于單目標人體關鍵點檢測方法、系統、設備及介質，通過獲取一個或多個初始的單目標圖像；對獲取的一個或多個初始的單目標圖像進行場景增強，基于場景增強后的單目標圖像對單目標人體關鍵點檢測算法進行學習訓練，生成單目標人體檢測模型；根據生成的單目標人體檢測模型獲取一個或多個初始的單目標圖像中的人體關鍵點以及對應的可見度信息。本發明不僅能夠對單目標圖像進行人體關鍵點檢測，還可以針對模糊、遮擋、截斷、異常姿態等復雜場景下進行優化，提升了復雜場景下檢測人體關鍵點的精度。而且本發明還可以采用參數量、計算量較小的模型及算子，利用模型量化加速模型推理，減小推理耗時。

技術領域

本發明涉及圖像識別技術領域，特別是涉及一種單目標人體關鍵點檢測方法、系統、設備及介質。

背景技術

在行人視頻結構化、行人重識別等應用場景中，獲取人體檢測結果之后，需要進一步獲取人體姿態信息，以便后續計算人體行為、人體完整度等相關信息。而人體姿態估計需要確定人體頭部、軀干、手、腳等多個關節部位的位置。因此，本發明提出一種利用人體關鍵點的形式描述人體姿態，其中一個人體關鍵點表示一個人體關節。由于可以通過人體檢測模塊獲取單個人體區域位置，所以需要進行單目標人體關鍵點檢測。然而，現有的主流人體關鍵點算法模型較大，且后處理耗時較長，不適用于要求快速響應的實際視頻監控場景；并且實際場景中的模糊、遮擋、截斷、異常姿態等情況都會給人體關鍵點的檢測帶來難度。

發明內容

鑒于以上所述現有技術的缺點，本發明的目的在于提供一種單目標人體關鍵點檢測方法、系統、設備及介質，用于解決現有技術中存在的技術問題。

為實現上述目的及其他相關目的，本發明提供一種單目標人體關鍵點檢測方法，包括以下步驟：

獲取一個或多個初始的單目標圖像；其中，所述單目標圖像僅包括單個目標對象；

對所述一個或多個初始的單目標圖像進行場景增強，基于場景增強后的單目標圖像對單目標人體關鍵點檢測算法進行學習訓練，生成單目標人體檢測模型；所述場景包括以下至少之一：模糊、擦除、遮擋、截斷、姿態；

根據所述單目標人體檢測模型獲取待檢測的一個或多個單目標圖像中的人體關鍵點以及對應的可見度信息。

可選地，對所述一個或多個初始的單目標圖像進行場景增強的具體方式包括以下至少之一：采用高斯模糊對一個或多個初始的單目標圖像進行模糊增強、采用運動模糊對一個或多個初始的單目標圖像進行模糊增強、采用隨機擦除對一個或多個初始的單目標圖像進行遮擋增強、采用半身遮擋對一個或多個初始的單目標圖像進行遮擋增強、采用隨機裁剪對一個或多個初始的單目標圖像進行截斷增強、采用半身截斷對一個或多個初始的單目標圖像進行截斷增強。

可選地，若采用隨機擦除對一個或多個初始的單目標圖像進行遮擋增強，則增強流程包括：

從所述一個或多個初始的單目標圖像中隨機選擇目標區域，判斷左上角坐標與所述目標區域寬高嘗試次數是否小于第一閾值；

若小于第一閾值，則計算所述目標區域包含人體關鍵點的數量是否小于第二閾值；若不小于第二閾值，則重新選擇目標區域；若小于第二閾值，則使用隨機像素值覆蓋所述目標區域，并調整擦除區域的人體關鍵點可見度為不可見；輸出完成遮擋增強的單目標圖像；

若不小于第一閾值，則直接輸出單目標圖像。

可選地，若采用半身遮擋對一個或多個初始的單目標圖像進行遮擋增強，則增強流程包括：

判斷所述一個或多個初始的單目標圖像是否使用實際物體遮擋；

若未使用實際物體遮擋，則生成適應目標對象人體下半身大小的隨機像素值區域；使用生成的隨機像素值區域覆蓋所述目標對象的人體下半身；