[發明專利]一種基于動作分析的信息關聯方法、裝置及電子設備

在審

• 申請號: 202011503087.6
• 申請日: 2020-12-17
• 公開（公告）號: CN112560700A
• 公開（公告）日: 2021-03-26
• 發明（設計）人: 江遠
• 申請（專利權）人: 北京贏識科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 成都頂峰專利事務所(普通合伙) 51224
• 代理人: 楊俊華

1.一種基于動作分析的信息關聯方法，其特征在于，包括：

采集多幀預設區域內的初始圖像；

對全部所述初始圖像進行預處理，得到全部初始人員對應的軌跡圖像和動作圖像；

當收到觸發指令時，檢測所述觸發指令時刻前一段預設時段內的所述軌跡圖像和所述動作圖像，確定目標人員；

對所述目標人員的所述軌跡圖像進行重識別操作，得到目標圖像；

將所述目標圖像與所述目標人員對應的目標信息進行存儲。

2.根據權利要求1所述的方法，其特征在于，所述對全部所述初始圖像進行預處理，得到全部初始人員對應的軌跡圖像和動作圖像的步驟，包括：

提取全部所述初始圖像內的人體框圖像和動作框圖像；

根據每一幀對應的人體框圖像形成所述軌跡圖像；

將所述軌跡圖像和所述動作框圖像輸入預處理模型，得到所述動作圖像。

3.根據權利要求2所述的方法，其特征在于，所述將所述軌跡圖像和所述動作框圖像輸入卷積神經網絡，得到所述動作圖像的步驟之前，所述方法還包括：

通過預設數量的樣本圖像訓練所述卷積神經網絡，得到所述預處理模型。

4.根據權利要求2所述的方法，其特征在于，所述將所述軌跡圖像和所述動作框圖像輸入預處理模型，得到所述動作圖像的步驟之后，所述方法還包括：

計算全部所述初始人員的每一幀所述軌跡圖像對應的質量值。

5.根據權利要求3所述的方法，其特征在于，所述當收到觸發指令時，檢測所述觸發指令時刻前一段預設時段內的所述軌跡圖像和所述動作圖像，確定目標人員的步驟之前，所述方法還包括：

在所述預設區域內標識目標點；

將所述目標點預設距離內區域作為匹配區域；

所述當收到觸發指令時，檢測所述觸發指令時刻前一段預設時段內的所述軌跡圖像和所述動作圖像，確定目標人員的步驟，包括：

根據所述軌跡圖像，將在所述預設時段內在所述匹配區域內的所述初始人員作為匹配人員；

根據所述匹配人員對應的所述動作圖像，判斷所述匹配人員的動作是否與所述觸發指令對應的操作符合；

若所述匹配人員的動作與所述觸發指令對應的操作符合，則將所述匹配人員作為所述目標人員。

6.根據權利要求5所述的方法，其特征在于，所述根據所述匹配人員對應的所述動作圖像，判斷所述匹配人員的動作是否與所述觸發指令對應的操作符合的步驟，包括：

識別所述匹配人員對應的動作圖像內的動作特征；

將所述動作特征與所述觸發指令對應的操作對應的參考特征進行比對；

若所述動作特征與所述參考特征符合，則判定所述匹配人員的動作與所述觸發指令對應的操作符合。

7.根據權利要求4所述的方法，其特征在于，所述對所述目標人員的所述軌跡圖像進行重識別操作，得到目標圖像的步驟，包括：

獲取所述觸發指令發生時刻的所述目標人員的人體框圖像；

將全部所述初始人員對應的人體框圖像與所述人體框圖像進行匹配；

將匹配成功的人體框圖像作為所述目標人員對應的所述軌跡圖像；

選取所述軌跡圖像中所述質量值最高的作為所述目標圖像。

8.一種基于動作分析的信息關聯裝置，其特征在于，包括：

采集模塊，用于采集多幀預設區域內的初始圖像；

預處理模塊，用于對全部所述初始圖像進行預處理，得到全部初始人員對應的軌跡圖像和動作圖像；

檢測模塊，用于當收到觸發指令時，檢測所述觸發指令時刻前一段預設時段內的所述軌跡圖像和所述動作圖像，確定目標人員；

重識別模塊，用于對所述目標人員的所述軌跡圖像進行重識別操作，得到目標圖像；

存儲模塊，用于將所述目標圖像與所述目標人員對應的目標信息進行存儲。