[發明專利]基于姿態識別的康復動作檢測方法、裝置、設備及介質

在審

• 申請號: 202110474993.6
• 申請日: 2021-04-29
• 公開（公告）號: CN113297919A
• 公開（公告）日: 2021-08-24
• 發明（設計）人: 周霆;阮宏洋;徐文婷
• 申請（專利權）人: 上海小芃科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62;G16H20/30
• 代理公司: 北京辰權知識產權代理有限公司 11619
• 代理人: 李小朋

本發明公開了一種基于姿態識別的康復動作檢測方法、裝置、設備及介質，包括：將獲取到的康復動作圖片輸入預設的HigherHRNet模型，得到每一幀圖片中的關節點位置；根據每一幀圖片中的關節點位置，計算連續幀之間的關節點距離以及四肢的變化角度；根據連續幀之間的關節點距離，計算關節點的移動速度；根據每一幀圖片中的關節點位置、連續幀之間的關節點距離、關節點的移動速度、四肢的變化角度以及預設的特征重要性參數，得到檢測出來的康復動作準確度。本公開實施例提供的檢測方法，更加注重視頻中康復動作的連續性，采用多幀圖像進行檢測，提高了檢測的準確度，而且該方法還能適應各種不同的動作，只需事先設定一些動作特征重要性參數就可以改變判斷標準。

技術領域

本發明涉及姿態識別技術領域，特別涉及一種基于姿態識別的康復動作檢測方法、裝置、設備及介質。

背景技術

醫學上判斷一個病人是否成功治愈的標準是：成功治愈＝50％的手術成功+50％康復成功。隨著人們對疾病治療的全面認識，康復訓練在整個疾病治療過程中起到越來越重要的作用。第一，康復訓練可以明顯恢復患者的體力，通過簡單的骨骼肌運動及有氧訓練，可以很好的恢復患者身體機能，有利于增進患者的抵抗力；第二，在訓練過程中，可以提高患者對戰勝疾病的信心，這些都在生理和心理上對疾病本身有一定的治療作用；第三，對一些特殊關節和運動功能有明顯的促進作用，尤其是手部、關節、脊柱等處的手術，術后早期的功能訓練對恢復手術器官的功能是非常重要的。因此，對于手術以后的康復訓練，一定要早期進行，并在醫生的指導之下循序漸進的開展，這樣才能起到良好的康復訓練效果。

現有的關節點識別主要應用在常規動作上的姿態識別，在康復動作上的姿態識別主要是識別單幀圖像關節點后與單幀標準動作進行比較，得出動作的標準程度。該技術首先忽略了一點就是康復訓練是一個連續的過程，動作的過程同樣重要，不可以忽略。其次康復動作有幾百個不一樣的動作，在面對這么多不一樣的動作時，現有技術需要先分類該動作屬于哪一類動作，然后再與這類動作進行比較，得出標準程度，一方面幾百分類會導致分類不正確，錯誤引導，另一方面，類別過多會導致時間太長，無法達到實時性的要求。

發明內容

本公開實施例提供了一種基于姿態識別的康復動作檢測方法、裝置、設備及介質。為了對披露的實施例的一些方面有一個基本的理解，下面給出了簡單的概括。該概括部分不是泛泛評述，也不是要確定關鍵/重要組成元素或描繪這些實施例的保護范圍。其唯一目的是用簡單的形式呈現一些概念，以此作為后面的詳細說明的序言。

第一方面，本公開實施例提供了一種基于姿態識別的康復動作檢測方法，包括：

將獲取到的康復動作圖片輸入預設的HigherHRNet模型，得到每一幀圖片中的關節點位置；

根據每一幀圖片中的關節點位置，計算連續幀之間的關節點距離以及四肢的變化角度；

根據連續幀之間的關節點距離，計算關節點的移動速度；

根據每一幀圖片中的關節點位置、連續幀之間的關節點距離、關節點的移動速度、四肢的變化角度以及預設的特征重要性參數，得到檢測出來的康復動作準確度。

在一個可選地實施例中，將獲取到的康復動作圖片輸入預設的HigherHRNet模型之前，還包括：

采用人臉識別方法識別出一個或多個康復訓練用戶；

當成功識別并定位出康復訓練用戶時，拍攝用戶進行康復訓練的視頻圖像。

在一個可選地實施例中，根據每一幀圖片中的關節點位置，計算連續幀之間的關節點距離，包括：

將連續多幀圖片作為一個樣本，按如下公式計算樣本中幀與幀之間的關節點距離，