[發明專利]一種動作識別方法、裝置、計算設備及存儲介質

在審

• 申請號: 202011018719.X
• 申請日: 2020-09-24
• 公開（公告）號: CN112257511A
• 公開（公告）日: 2021-01-22
• 發明（設計）人: 朱州
• 申請（專利權）人: 北京影譜科技股份有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/46;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 北京萬思博知識產權代理有限公司 11694
• 代理人: 冀婷

1.一種動作識別方法，包括：

采用CPM網絡提取單幀圖像中與手臂相關的若干個關鍵點的熱圖；

采用PAF連接每幀圖像的所述若干個關鍵點；

將多幀圖像的關鍵點位置組合為一個時間序列的張量；

采用多層TCN分類器對所述張量進行分類，實現動作識別，所述多層TCN分類器是在TCN分類器的基礎上進行多層疊加，每一層TCN對應不同的感受野大小。

2.根據權利要求1所述的方法，其特征在于：所述的與手臂相關的若干個關鍵點的數量為6。

3.根據權利要求1所述的方法，其特征在于：所述的采用多層TCN分類器對所述張量進行分類，實現動作識別包括：

將每組連續幀劃分為多個小組，小組數量與所述多層TCN分類器的層數相等，每一小組對應多層TCN分類器的一層；

用所述多層TCN分類器的每一層TCN分類器分別提取對應小組的信息，所述信息包括時序動作特征；

將每一層TCN分類器獲取的結果進行加權，得到分類結果。

4.根據權利要求1至3中任一項所述的方法，其特征在于：還包括：

當連續若干張圖像被分為同一類時，動作識別結果有效。

5.根據權利要求4所述的方法，其特征在于：所述的連續若干張圖像為連續的24張圖像。

6.一種動作識別裝置，包括：

提取模塊，其配置成采用CPM網絡提取單幀圖像中與手臂相關的若干個關鍵點的熱圖；

連接模塊，其配置成采用PAF連接每幀圖像的所述若干個關鍵點；

組合模塊，其配置成將多幀圖像的關鍵點位置組合為一個時間序列的張量；和

分類模塊，其配置成采用多層TCN分類器對所述張量進行分類，實現動作識別，所述多層TCN分類器是在TCN分類器的基礎上進行多層疊加，每一層TCN對應不同的感受野大小。

7.根據權利要求6所述的裝置，其特征在于：所述的分類模塊包括：

分組子模塊，其配置成將每組連續幀劃分為多個小組，小組數量與所述多層TCN分類器的層數相等，每一小組對應多層TCN分類器的一層；

分類子模塊，其配置成用所述多層TCN分類器的每一層TCN分類器分別提取對應小組的信息，所述信息包括時序動作特征；和

加權子模塊，其配置成將每一層TCN分類器獲取的結果進行加權，得到分類結果。

8.根據權利要求6或7所述的裝置，其特征在于：還包括：

判斷模塊，其配置成當連續若干張圖像被分為同一類時，動作識別結果有效。

9.一種計算設備，包括存儲器、處理器和存儲在所述存儲器內并能由所述處理器運行的計算機程序，其中，所述處理器執行所述計算機程序時實現如權利要求1-5中任一項所述的方法。

10.一種存儲介質，優選為非易失性可讀存儲介質，其內存儲有計算機程序，所述計算機程序在由處理器執行時實現如權利要求1-5中任一項所述的方法。