[發明專利]對象動作識別方法、對象動作識別裝置和電子設備

在審

• 申請號: 202010216868.0
• 申請日: 2020-03-25
• 公開（公告）號: CN113449551A
• 公開（公告）日: 2021-09-28
• 發明（設計）人: 朱亞旋
• 申請（專利權）人: 南京人工智能高等研究院有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/46;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 北京唐頌永信知識產權代理有限公司 11755
• 代理人: 匡霖

公開了一種對象動作識別方法、對象動作識別裝置和電子設備。該對象動作識別方法包括：獲取對象的多個關鍵點中的每個關鍵點的一段連續時間上的系列坐標；對每個關鍵點的系列坐標進行一維卷積以獲得所述對象的點級特征；基于所述點級特征進行分組和一維卷積以獲得局部特征；基于所述點級特征使用全局網絡以獲得全局特征；以及，基于所述局部特征和所述全局特征識別所述對象的動作。這樣，提高了動作識別的準確性。

技術領域

本申請涉及機器視覺領域，且更為具體地，涉及一種對象動作識別方法，對象動作識別裝置和電子設備。

背景技術

在機器視覺領域中，基于機器視覺的動作識別和行為理解能夠顯著影響人們生活的各個方面，因為在人際交互過程中，視覺是最重要的信息，可以幫助人們迅速獲得一些關鍵信息。比如，人的手勢和其它動作能夠反映出人的態度、潛在意圖和情緒等。

可以基于人體骨架點信息來進行人的動作識別，這需要捕捉序列數據本身所存在的空間骨架點之間的相關性信息以及每個骨架點在時序維度的運動信息。

此外，通過對于人以外的其它對象的動作識別，也可以獲得相關信息，例如，通過識別正在運行的機械的特定動作，可以判斷機器是否運轉正常。

因此，期望提供改進的對象動作的識別方案。

發明內容

為了解決上述技術問題，提出了本申請。本申請的實施例提供了一種對象動作識別方法、對象動作識別裝置和電子設備，其基于對象關鍵點在一段連續時間上的系列坐標獲得對象的點級特征，并基于點級特征獲得局部特征和全局特征以識別對象的動作，從而提高了動作識別的準確性。

根據本申請的一方面，提供了一種對象動作識別方法，包括：獲取對象的多個關鍵點中的每個關鍵點的一段連續時間上的系列坐標；對每個關鍵點的系列坐標進行一維卷積以獲得所述對象的點級特征；基于所述點級特征進行分組和一維卷積以獲得局部特征；基于所述點級特征使用全局網絡以獲得全局特征；以及，基于所述局部特征和所述全局特征識別所述對象的動作。

根據本申請的另一方面，提供了一種對象動作識別裝置，包括：坐標獲取單元，用于獲取對象的多個關鍵點中的每個關鍵點的一段連續時間上的系列坐標；點級特征獲得單元，用于對所述坐標獲取單元所獲取的每個關鍵點的系列坐標進行一維卷積以獲得所述對象的點級特征；局部特征獲得單元，用于基于所述點級特征獲得單元所獲得的所述點級特征進行分組和一維卷積以獲得局部特征；全局特征獲得單元，用于基于所述點級特征獲得單元所獲得的所述點級特征使用全局網絡以獲得全局特征；以及，對象動作識別單元，用于基于所述局部特征獲得單元所獲得的所述局部特征和所述全局特征獲得單元所獲得的所述全局特征識別所述對象的動作。

根據本申請的再一方面，提供了一種電子設備，包括：處理器；以及，存儲器，在所述存儲器中存儲有計算機程序指令，所述計算機程序指令在被所述處理器運行時使得所述處理器執行如上所述的內容推薦方法。

根據本申請的又一方面，提供了一種計算機可讀介質，其上存儲有計算機程序指令，所述計算機程序指令在被處理器運行時使得所述處理器執行如上所述的內容推薦方法。

本申請實施例提供的對象動作識別方法、對象動作識別裝置和電子設備，能夠基于對象關鍵點在一段連續時間上的系列坐標獲得對象的點級特征，并基于點級特征獲得局部特征和全局特征以識別對象的動作，從而提高了動作識別的準確性。

附圖說明

通過結合附圖對本申請實施例進行更詳細的描述，本申請的上述以及其他目的、特征和優勢將變得更加明顯。附圖用來提供對本申請實施例的進一步理解，并且構成說明書的一部分，與本申請實施例一起用于解釋本申請，并不構成對本申請的限制。在附圖中，相同的參考標號通常代表相同部件或步驟。

圖1圖示了根據本申請實施例的對象動作識別方法的流程圖。

圖2圖示了根據本申請實施例的人體骨架圖的示意圖。