[發明專利]一種行為檢測方法、裝置及設備

有效

• 申請號: 202011260947.8
• 申請日: 2020-11-12
• 公開（公告）號: CN112380971B
• 公開（公告）日: 2023-08-25
• 發明（設計）人: 趙飛
• 申請（專利權）人: 杭州海康威視數字技術股份有限公司
• 主分類號: G06V20/40
• 分類號: G06V20/40
• 代理公司: 北京博思佳知識產權代理有限公司 11415
• 代理人: 楊春香

1.一種行為檢測方法，其特征在于，所述方法包括：

獲取待檢測視頻，所述待檢測視頻包括多個待檢測圖像；

從所述多個待檢測圖像中選取同一目標對象的多個目標待檢測圖像，基于所述多個目標待檢測圖像獲取所述目標對象的切片序列，所述切片序列包括基于所述目標對象的目標框位置從所述多個目標待檢測圖像中截取的子圖像；

根據所述切片序列獲取所述目標對象的多個行為特征；

針對每個行為特征，基于指定類型行為對應的多個類簇中心特征，確定所述行為特征與每個類簇中心特征的相似度；基于所述行為特征與每個類簇中心特征的相似度從所述多個類簇中心特征中選取目標類簇中心特征；

基于所述多個行為特征對應的目標類簇中心特征確定所述待檢測視頻存在所述指定類型行為，或所述待檢測視頻不存在所述指定類型行為；

所述基于所述多個行為特征對應的目標類簇中心特征確定所述待檢測視頻存在所述指定類型行為，或所述待檢測視頻不存在所述指定類型行為，包括：

若所述多個行為特征對應的目標類簇中心特征與所述多個類簇中心特征完全相同，且所述多個行為特征對應的目標類簇中心特征的順序與所述多個類簇中心特征的順序匹配，則確定所述待檢測視頻存在所述指定類型行為；

否則，確定所述待檢測視頻不存在所述指定類型行為；

其中，所述多個行為特征對應的目標類簇中心特征的順序與所述多個行為特征的時間先后順序匹配；所述指定類型行為包括多個子行為，子行為的數量與類簇中心特征的數量相同，所述多個子行為與所述多個類簇中心特征一一對應，所述多個類簇中心特征的順序與所述多個子行為的發生順序匹配。

2.根據權利要求1所述的方法，其特征在于，所述從所述多個待檢測圖像中選取同一目標對象的多個目標待檢測圖像，包括：

對所述多個待檢測圖像中的特定目標進行目標檢測，得到特定目標在多個候選待檢測圖像中的對象位置；候選待檢測圖像是所述多個待檢測圖像中存在特定目標的待檢測圖像，所述特定目標包括至少一個目標對象；

對所述多個候選待檢測圖像中的同一個目標對象進行目標跟蹤，得到所述目標對象在多個目標待檢測圖像中的對象位置；目標待檢測圖像是所述多個候選待檢測圖像中存在所述目標對象的待檢測圖像。

3.根據權利要求2所述的方法，其特征在于，

所述基于所述多個目標待檢測圖像獲取所述目標對象的切片序列，包括：

基于所述目標對象在多個目標待檢測圖像中的對象位置，確定所述目標對象的目標框位置，所述目標框位置是所有對象位置的最大外接矩形；

基于所述目標框位置從所述多個目標待檢測圖像中截取多個子圖像；

按照單位長度對所述多個子圖像進行切片，得到至少一個切片序列；

其中，相鄰兩個切片序列之間的間隔為固定間隔值。

4.根據權利要求1所述的方法，其特征在于，基于所述行為特征與每個類簇中心特征的相似度從所述多個類簇中心特征中選取目標類簇中心特征，包括：

基于所述行為特征與每個類簇中心特征的相似度，確定最大相似度；

將所述最大相似度對應的類簇中心特征確定為所述目標類簇中心特征；

或者，確定所述最大相似度是否大于相似度閾值，若是，則將所述最大相似度對應的類簇中心特征確定為所述目標類簇中心特征。

5.根據權利要求1-4任一項所述的方法，其特征在于，

所述指定類型行為對應的多個類簇中心特征的獲取方式，包括：

獲取發生所述指定類型行為的多個標定樣本圖像；

從所述多個標定樣本圖像中選取同一樣本對象的多個目標樣本圖像，基于所述多個目標樣本圖像獲取所述樣本對象的樣本序列，所述樣本序列包括基于所述樣本對象的樣本框位置從所述多個目標樣本圖像中截取的子圖像；

根據所述樣本序列獲取所述樣本對象的多個樣本特征；

對所述多個樣本特征進行聚類，得到多個類簇，每個類簇內包括至少一個樣本特征；針對每個類簇，基于所述類簇內的樣本特征確定所述類簇的類簇中心特征，以得到所述多個類簇分別對應的類簇中心特征。