[發明專利]人體動作識別裝置及方法、電子設備

在審

• 申請號: 201910541727.3
• 申請日: 2019-06-21
• 公開（公告）號: CN112115746A
• 公開（公告）日: 2020-12-22
• 發明（設計）人: 尹汭;譚志明;張宗艷;丁藍
• 申請（專利權）人: 富士通株式會社
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62
• 代理公司: 北京三友知識產權代理有限公司 11127
• 代理人: 王鍇;陶海萍

1.一種人體動作識別裝置，所述裝置包括：

目標檢測單元，其用于檢測輸入圖像中的人體的邊界框；

第一檢測單元，其用于在檢測出的人體的邊界框中，基于所述人體的關鍵點計算所述人體的特征，并根據所述人體的特征來檢測所述人體的動作，得到第一識別結果；

第二檢測單元，其用于在檢測出的人體的邊界框中，基于卷積神經網絡來檢測所述人體的動作，得到第二識別結果；以及

選擇單元，其用于選擇所述第一檢測單元和所述第二檢測單元中的至少一個來檢測人體的動作，以得到所述第一識別結果和所述第二識別結果中的至少一個。

2.根據權利要求1所述的裝置，其中，所述第一檢測單元包括：

第一檢測模塊，其用于在檢測出的人體的邊界框中檢測所述人體的關鍵點；

計算模塊，其用于根據檢測出的所述人體的關鍵點計算所述人體的特征；以及

第二檢測模塊，其用于根據計算出的所述人體的特征，基于分類器和/或預設的規則檢測所述人體的動作，得到第一識別結果。

3.根據權利要求2所述的裝置，其中，

所述人體的關鍵點包括分別表示所述人體的多個部位所在位置的多個點。

4.根據權利要求2所述的裝置，其中，

所述人體的特征包括：

分別表示所述人體的多個部位所在位置的多個點的二維坐標；以及

所述多個點的連線之間的至少一個角度。

5.根據權利要求2所述的裝置，其中，

所述第一檢測模塊基于級聯金字塔網絡(CPN)檢測所述人體的關鍵點。

6.根據權利要求2所述的裝置，其中，

所述分類器是多層感知機(MLP)分類器。

7.根據權利要求1所述的裝置，其中，

所述第二檢測模塊根據計算出的所述人體的特征，基于分類器檢測所述人體的軀干動作，并基于預設的規則檢測所述人體的頭部動作和上肢動作。

8.一種電子設備，所述電子設備包括根據權利要求1-7中的任一項所述的裝置。

9.一種人體動作識別方法，所述方法包括：

檢測輸入圖像中的人體的邊界框；

選擇并進行以下的至少一種檢測：在檢測出的人體的邊界框中，基于所述人體的關鍵點計算所述人體的特征，并根據所述人體的特征來檢測所述人體的動作，得到第一識別結果；以及在檢測出的人體的邊界框中，基于卷積神經網絡來檢測所述人體的動作，得到第二識別結果。

10.根據權利要求9所述的方法，其中，在檢測出的人體的邊界框中，基于所述人體的關鍵點計算所述人體的特征，并根據所述人體的特征來檢測所述人體的動作，得到第一識別結果，包括：

在檢測出的人體的邊界框中檢測所述人體的關鍵點；

根據檢測出的所述人體的關鍵點計算所述人體的特征；以及

根據計算出的所述人體的特征，基于分類器和/或預設的規則檢測所述人體的動作，得到第一識別結果。