[發(fā)明專利]動作類型識別方法、裝置、電子設(shè)備和介質(zhì)

在審

• 申請?zhí)枺?/td>: 202010824543.0
• 申請日: 2020-08-17
• 公開（公告）號: CN112102360A
• 公開（公告）日: 2020-12-18
• 發(fā)明（設(shè)計）人: 葉景泰
• 申請（專利權(quán)）人: 深圳數(shù)聯(lián)天下智能科技有限公司
• 主分類號: G06T7/246
• 分類號: G06T7/246;G06K9/62;G06T7/62;G06T7/90;G06T7/136;G06T7/187
• 代理公司: 深圳中細軟知識產(chǎn)權(quán)代理有限公司 44528
• 代理人: 彭佳偉

1.一種動作類型識別方法，其特征在于，包括：

獲取人體熱圖像，所述人體熱圖像至少包括用戶的軀體；

確定所述人體熱圖像中的人體區(qū)域，從所述人體熱圖像中提取所述人體區(qū)域的特征信息；

根據(jù)所述人體熱圖像中相鄰兩幀人體熱圖像的人體區(qū)域的特征信息，確定在所述相鄰兩幀人體熱圖像之間用戶的姿勢變化情況；

根據(jù)所述用戶的姿勢變化情況生成時間軸數(shù)據(jù)，所述時間軸數(shù)據(jù)包括多幀人體熱圖像，所述多幀人體熱圖像按照所述姿勢變化情況被劃分至不同的姿勢階段；

從所述時間軸數(shù)據(jù)中獲取各個姿勢階段包括的人體熱圖像，根據(jù)所述各個姿勢階段包括的人體熱圖像獲得各個姿勢階段對應(yīng)的代表姿勢熱圖像，一個所述代表姿勢熱圖像用于代表一個姿勢階段的用戶姿勢；

獲取所述時間軸數(shù)據(jù)中第一姿勢階段對應(yīng)的第一代表姿勢熱圖像，和第二姿勢階段對應(yīng)的第二代表姿勢熱圖像，根據(jù)所述第一代表姿勢熱圖像和所述第二代表姿勢熱圖像，確定在所述第一姿勢階段到所述第二姿勢階段所述用戶是否發(fā)生目標動作，所述第二姿勢階段為所述第一姿勢階段的下一階段。

2.根據(jù)權(quán)利要求1所述的動作類型識別方法，其特征在于，所述根據(jù)所述人體熱圖像中相鄰兩幀人體熱圖像的人體區(qū)域的特征信息，確定在所述相鄰兩幀人體熱圖像之間用戶的姿勢變化情況，包括：

獲取所述人體熱圖像中，所述相鄰兩幀人體熱圖像之間相同位置的像素點的溫度差值；

獲得所述溫度差值不小于溫度差值閾值的像素點個數(shù)；

若所述溫度差值不小于所述溫度差值閾值的像素點個數(shù)大于個數(shù)閾值，則確定在所述相鄰兩幀人體熱圖像之間所述用戶發(fā)生姿勢變化。

3.根據(jù)權(quán)利要求2所述的動作類型識別方法，其特征在于，所述相鄰兩幀人體熱圖像包括歷史幀和參考幀，所述歷史幀為所述參考幀的前一幀；

所述根據(jù)所述用戶的姿勢變化情況生成時間軸數(shù)據(jù)，包括：

在所述歷史幀和所述參考幀之間所述用戶發(fā)生姿勢變化的情況下，將所述參考幀添加進隊列，并在所述隊列成員未滿的情況下，將所述參考幀作為所述歷史幀，將所述參考幀的下一幀作為所述參考幀；執(zhí)行所述確定在所述相鄰兩幀人體熱圖像之間用戶的姿勢變化情況的步驟；

在所述隊列成員已滿的情況下，將所述隊列新增為所述時間軸數(shù)據(jù)的一個姿勢階段。

4.根據(jù)權(quán)利要求1-3任一項所述的動作類型識別方法，其特征在于，所述從所述時間軸數(shù)據(jù)中獲取各個姿勢階段包括的人體熱圖像，根據(jù)所述各個姿勢階段包括的人體熱圖像獲得各個姿勢階段對應(yīng)的代表姿勢熱圖像，包括：

獲取所述隊列的所有人體熱圖像幀中各個像素點的溫度值和位置信息，獲得所述所有人體熱圖像幀中所述位置信息相同的像素點的溫度值的平均值；

根據(jù)獲得的所述像素點的溫度值的平均值和所述像素點的位置信息，獲得所述所有人體熱圖像幀的平均幀；

將所述平均幀作為所述姿勢階段對應(yīng)的代表姿勢熱圖像。

5.根據(jù)權(quán)利要求4所述的動作類型識別方法，其特征在于，所述根據(jù)所述第一代表姿勢熱圖像和所述第二代表姿勢熱圖像，確定在所述第一姿勢階段到所述第二姿勢階段所述用戶是否發(fā)生目標動作，包括：

根據(jù)所述第一代表姿勢熱圖像和所述第二代表姿勢熱圖像，獲取所述第一姿勢階段和所述第二姿勢階段分別對應(yīng)的人體區(qū)域參數(shù)，一個所述人體區(qū)域參數(shù)反映一個所述代表姿勢熱圖像中的人體區(qū)域的尺寸，所述人體區(qū)域參數(shù)為人體區(qū)域的周長、面積或者外接矩陣中的至少一種；

比較所述第一姿勢階段和所述第二姿勢階段分別對應(yīng)的人體區(qū)域參數(shù)，確定在所述第一姿勢階段到所述第二姿勢階段所述用戶是否發(fā)生目標動作。

6.根據(jù)權(quán)利要求1-3任一項所述的動作類型識別方法，其特征在于，所述獲取人體熱圖像之前，所述方法還包括：

獲取熱成像傳感器采集的待處理熱圖像，檢測所述待處理熱圖像中像素點的溫度值是否高于溫度閾值；

若所述待處理熱圖像中存在像素點的溫度值高于所述溫度閾值，對所述待處理熱圖像進行二值化處理之后，提取所述待處理熱圖像中的連通區(qū)域，獲取所述連通區(qū)域的特征參數(shù)，所述特征參數(shù)反映所述連通區(qū)域的形狀特征；

根據(jù)所述連通區(qū)域的特征參數(shù)，確定所述待處理熱圖像是否為所述人體熱圖像。