[發明專利]一種基于時空特征融合的實時動作識別方法

在審

• 申請號: 202110300133.0
• 申請日: 2021-03-22
• 公開（公告）號: CN113052059A
• 公開（公告）日: 2021-06-29
• 發明（設計）人: 李宗民;張玉鵬;孫奉鈺;張敏杰;劉玉杰
• 申請（專利權）人: 中國石油大學（華東）
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.一種基于時空特征融合的實時動作識別方法，其特征在于，包括如下步驟：

s1、通過攝像頭獲取人物動作的視頻信息；

s2、將獲取人物動作的視頻信息上傳到服務器；

s3、對上傳的視頻進行預處理，進行等間隔的分幀；

s4、使用動作檢測器，對視頻信息進行特征提取，使用時空特征融合方法，對視頻信息進行時間域與空間域特征融合，完成特征提取；

s5、使用深度學習的方法，對特征進行綜合分析，判斷目標動作；

s6、將結果實時反饋。

2.根據權利要求1所述的一種基于時空特征融合的實時動作識別方法，其特征在于，所述步驟s1中，在目標人物運動的過程中獲取視頻特征信息。

3.根據權利要求1所述的一種基于時空特征融合的實時動作識別方法，其特征在于，所述步驟s2中，完成對于s1中獲取到的數據上傳服務器進行分析。

4.根據權利要求1所述的一種基于時空特征融合的實時動作識別方法，其特征在于，所述步驟s3中，完成對于數據的預處理，使用視頻分幀技術，固定每秒提取16幀圖片，提取連續的視頻幀。

5.根據權利要求1所述的一種基于時空特征融合的實時動作識別方法，其特征在于，所述步驟s4中，特征提取的具體的處理過程如下：

s41、通過動作檢測器，在步驟s3的基礎上，完成對于每一幀圖片目標動作的空間域特征提取工作；

s42、通過時空特征融合方法，在步驟s41的基礎上，實現時間域與空間域特征的融合；

s43、通過特征融合技術，融合步驟s41與步驟s42提取的特征。

6.根據權利要求1所述的一種基于時空特征融合的實時動作識別方法，其特征在于，所述步驟s5中，根據s4提取的特征，送入深度學習分類器中進行目標人物動作判別。

7.根據權利要求1所述的一種基于時空特征融合的實時動作識別方法，其特征在于，所述步驟s6中，根據s5分析結果完成對待目標動作的實時反饋工作，以減少因時間滯后而引起的錯誤判別以及帶來的財產損失。