[發明專利]骨骼序列行為識別方法和裝置

在審

• 申請號: 202210615403.1
• 申請日: 2022-06-01
• 公開（公告）號: CN114821671A
• 公開（公告）日: 2022-07-29
• 發明（設計）人: 王青天
• 申請（專利權）人: 北京愛筆科技有限公司
• 主分類號: G06V40/10
• 分類號: G06V40/10;G06V10/74
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 張靜

1.一種骨骼序列行為識別方法，其特征在于，包括：

獲取待處理的骨骼編碼幀組，所述待處理的骨骼編碼幀組包含多幀骨骼編碼幀，每幀骨骼編碼幀中包括多個骨骼編碼單位，一個骨骼編碼單位與動物體的一個拓撲結構相對應，每個骨骼編碼單位對應一個第一數組，所述第一數組包括至少一個數據；

將所述骨骼編碼幀組作為初始輸入信息輸入目標處理模型，所述目標處理模型包括至少兩層處理模塊，每層處理模塊包括空間維度處理單元和時間維度處理單元；

控制目標處理模型中每層處理模塊中的空間維度處理單元和時間維度處理單元分別對于輸入信息進行拓撲結構內變化和拓撲結構間變化的處理，得到目標處理結果；

基于所述目標處理結果，確定所述骨骼編碼幀組對應的行為動作。

2.根據權利要求1所述的方法，其特征在于，所述獲取待處理的骨骼編碼幀組之后，還包括：

依次對所述骨骼編碼幀組中骨骼編碼單位對應的第一數組排序，得到第一骨骼編碼序列；

在所述第一骨骼編碼序列前面插入第一標識，得到第二骨骼編碼序列，所述第二骨骼編碼序列用于作為所述目標處理模型的初始輸入信息。

3.根據權利要求1-2任一項所述的方法，其特征在于，控制目標處理模型中每層處理模塊中的空間維度處理單元和時間維度處理單元分別對于輸入信息進行拓撲結構內變化和拓撲結構間變化的處理，得到目標處理結果，包括：

對于輸入當前層的輸入信息在空間維度和時間維度分別進行拓撲結構內變化和拓撲結構間變化的處理，得到當前層的處理結果；

將當前層的處理結果作為下一層的輸入信息進行空間維度和時間維度的處理，直至所述目標處理模型中每一層處理完成處理，輸出目標處理結果。

4.根據權利要求3所述的方法，其特征在于，對于輸入當前層的輸入信息在空間維度和時間維度分別進行拓撲結構內變化和拓撲結構間變化的處理，得到當前層的處理結果，包括：

控制空間維度處理單元，對于所述當前層的輸入信息進行拓撲結構內變化和拓撲結構間變化的處理，得到第一輸出信息；

控制時間維度處理單元基于所述第一輸出信息，對于所述第二骨骼編碼序列進行拓撲結構內變化和拓撲結構間變化的處理，得到第二輸出信息，所述第二輸出信息作為當前層的處理結果。

5.根據權利要求4所述的方法，其特征在于，控制空間維度處理單元，對于所述當前層的輸入信息進行拓撲結構內變化和拓撲結構間變化的處理，得到第一輸出信息，包括：

控制空間維度處理單元，從輸入當前層的所述輸入信息中獲取第一目標信息，所述第一目標信息與所述第一標識的位置、長度分別對應；

在空間維度，計算所述第一目標信息與第一非目標信息中每個第二數組的第一相似度，基于所述第一相似度得到第一結果值，所述第二數組與第一數組的長度相同，所述第一非目標信息是所述輸入信息中除了第一目標信息的剩余信息；

以幀為單位計算得到多幀骨骼編碼幀中拓撲結構間的第一變化值，以拓撲結構為單位，計算得到骨骼編碼幀中每個拓撲結構內的第二變化值；

基于所述第一變化值以及所述第二變化值，得到第二結果值；

基于第一結果值和第二結果值，計算得到所述第一輸出信息。