[發明專利]一種基于人體姿態估計的武術動作識別方法

在審

• 申請號: 202210052217.1
• 申請日: 2022-01-18
• 公開（公告）號: CN114419505A
• 公開（公告）日: 2022-04-29
• 發明（設計）人: 黃繼風;姜康
• 申請（專利權）人: 上海師范大學
• 主分類號: G06V20/40
• 分類號: G06V20/40;G06V40/20;G06K9/62;G06N3/04;G06N3/08;G06V10/80;G06V10/82
• 代理公司: 北京百年育人知識產權代理有限公司 11968
• 代理人: 劉朋

1.一種基于人體姿態估計的武術動作識別方法，其特征在于，包括如下步驟：

獲取標準的教學視頻；

將所述教學視頻根據武術動作提取短視頻，得到單幀人物動作圖片；

將所述單幀人物動作圖片送入人體姿態識別網絡得到關節點數據；

對所述關節點數據進行標準化、歸一化處理；

將處理后的所述關節點數據進行分類，根據分類結果對所述關節點數據進行保存，并顯示。

2.根據權利要求1所述的一種基于人體姿態估計的武術動作識別方法，其特征在于，將所述教學視頻根據武術動作提取短視頻，得到單幀人物動作圖片，短視頻時間為1-2秒，視頻為60幀。

3.根據權利要求1所述的一種基于人體姿態估計的武術動作識別方法，其特征在于，將所述單幀人物動作圖片送入人體姿態識別網絡進行檢測和優化得到關節點數據，檢測步驟如下：

通過神經網絡訓練提取圖像外部特征；

根據所述圖像外部特征進行預測，得到關節點位置和連接信息；

將所述圖像外部特征、關節點位置和連接信息進行融合，進行再次訓練；

根據訓練結果得到關節點數據。

4.根據權利要求3所述的一種基于人體姿態估計的武術動作識別方法，其特征在于，優化步驟如下：

確定主關節點；

對部分關節點進行缺失補充。

5.根據權利要求1所述的一種基于人體姿態估計的武術動作識別方法，其特征在于，將處理后的所述關節點數據通過DNN、CNN、RNN、LSTM四個神經分類網絡進行分類，根據分類結果對所述關節點數據進行保存，并顯示。

6.一種基于人體姿態估計的武術動作識別裝置，其特征在于，包括：

視頻獲取模塊：用于獲取標準的教學視頻；

短視頻提取模塊：用于將所述教學視頻根據武術動作提取短視頻，得到單幀人物動作圖片；

關節點數據獲取模塊：用于將所述單幀人物動作圖片送入人體姿態識別網絡得到關節點數據；

數據處理模塊：用于對所述關節點數據進行標準化、歸一化處理；

分類保存及顯示模塊：用于將處理后的所述關節點數據進行分類，根據分類結果對所述關節點數據進行保存，并顯示。

7.根據權利要求6所述的一種基于人體姿態估計的武術動作識別裝置，其特征在于，所述關節點數據獲取模塊包括檢測單元和優化單元：所述檢測單元包括：

外部特征提取子單元：用于通過神經網絡訓練提取圖像外部特征；

預測子單元：用于根據所述圖像外部特征進行預測，得到關節點位置和連接信息；

融合訓練子單元：用于將所述圖像外部特征、關節點位置和連接信息進行融合，進行再次訓練；

數據輸出子單元：用于根據訓練結果得到關節點數據。

8.根據權利要求6所述的一種基于人體姿態估計的武術動作識別裝置，其特征在于，所述優化單元包括：

主關節點確定子單元：用于確定主關節點；

缺失補充子單元：用于對部分關節點進行缺失補充。

9.一種計算機設備，其特征在于，包括存儲器和處理器，所述存儲器中存儲有計算機可讀指令，所述處理器執行所述計算機可讀指令時實現如權利要求1至5中任一項所述的基于人體姿態估計的武術動作識別方法的步驟。

10.一種計算機可讀存儲介質，其特征在于，所述計算機可讀存儲介質上存儲有計算機可讀指令，所述計算機可讀指令被處理器執行時實現如權利要求1至5中任一項所述的基于人體姿態估計的武術動作識別方法的步驟。